


本 书 常用 符号 说 明 


权 值 矩阵 

第 大 个 时 刻 或 第 关 次 达 代 时 的 权 值 矩阵 
权 值 年 阵 研 中 的 第 ; 行 矢 量 
权 值 矩阵 环 中 的 第 ;i 行 第 7 列 元 素 
输入 矢量 

第 天 个 时 刻 的 输入 矢量 

输入 失 量 疡 中 的 第 守 个 元 素 

阅 值 矢量 - 
第 天 个 时 刻 或 第 天 次 达 代 时 的 阔 值 矢 是 

阅 值 矢量 鼎 中 的 第 个 元 素 

神经 元 传递 前 数 

网 络 的 第 ! 个 输入 到 网 络 第 大 层 神经 元 的 连接 权 值 年 阵 

网 络 的 第 ! 层 神经 元 于 第 丰 层 神经 元 的 连接 权 值 矩阵 

单 输入 级 联网 络 的 连 搂 权 值 答 阵 : 当 f = 工时 ， 琴 "是 输入 权 值 矩 阵 ; 
治 ; 关 1 时, 研 是 网 络 第 ;一 1 层 神经 元 到 第 ; 层 神经 元 的 连接 权 值 甜 阵 
反馈 连接 权 值 矩 阵 

网 络 第 ; 层 神经 元 的 个 数 
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1.1 神经 网 络 的 发 展 概况 


研究 人 类 智能 一 上 是 科学 发 展 中 最 有 意义 、 最 激动 人 心 ， 也 是 最 富有 挑战 性 的 课题 。 
人 工 神经 网 络 〈Artificial Neural Network 一 ANN)， 简 称 为 “神经 网 络 ”(NN)， 作 为 对 人 
脑 最 简单 的 一 种 抽象 和 模拟 ， 是 探索 人 类 智能 奥秘 的 有 力 工 具 。 神 经 网 络 技术 作为 智能 科 
学 的 领头 羊 ， 是 近年 来 发 展 起 来 的 一 门 十 分 活跃 的 交叉 学 科 。 它 涉及 生物 、 电 子 、 计 算 
机 、 数 学 、 物 理 等 学 科 ， 有 着 广泛 的 应 用 前 景 。 

神经 网 络 的 研究 始 于 20 世纪 40 年 代 。 半 个 多 世纪 以 来 ， 它 经 历 了 一 条 由 兴起 到 革 
退 、 又 由 衰退 到 兴盛 的 肌 折 发 展 过 程 ， 这 一 发 展 过 程 大 致 可 以 分 为 以 下 四 个 阶段 。 

1 初始 发 展 阶段 

1943 年 ， 心 理学 家 W $. MeCulloch 和 数学 家 WW. Pitts 在 研究 生物 神经 元 的 基础 上 提出 
了 一 种 简单 前 人 工 神经 元 模型 ， 即 后 来 所 谓 的 “M-P 模型 ” 在 该 模型 中 ， 神 经 元 的 活动 
表现 为 “兴奋 ”和 “抑制 ”两 个 状态 ， 其 基本 工作 原 至 与 绳 在 的 阅 值 单元 模型 基本 相同 。 
虽然 M-P 模型 过 于 简单 ， 且 只 能 完成 …… 些 简单 的 罗 辑 运算 ， 但 它 的 出 现 开创 了 神经 网 络 
研究 的 先河 ， 并 为 以 后 的 研究 提供 了 依据 。 

1949 年 ， 心 理学 家 D. 0. Hebb 发 表 了 论著 《行为 白 组 织 》， 首 先 提出 了 一 种 调整 神经 
网 络 连接 权 值 的 规则 。 他 认为 ， 学 习 过 程 是 在 突 触 上 发 牛 的 ， 连 接 权 值 的 调整 正比 于 两 相 
连 神经 元 活动 状态 的 乘积 ， 这 就 是 著名 的 Hehh 学 习 律 。 直 到 现在 ，Hepb 学 习 律 仍然 是 神 
经 网 络 中 一 个 极为 重要 的 学 习 规则 。 

1957 年 ，FE_Rosenblatt 提出 了 著名 的 感知 器 〈Percepton ) 模型 ， 这 是 第 一 个 真正 的 人 
工 神经 网 络 。 这 个 模型 由 简单 的 网 值 神经 元 构成 ， 割 步 具 备 了 诸如 并 行 处 理 、 分 布 存储 和 
学 习 等 神经 网 络 的 一 些 基本 特性 ， 从 而 确立 了 从 系统 角度 研究 神经 网 络 的 基础 。 

1960 年 ，B. Widrow 和 M, E. Hoff 提 讽 了 自 适应 线性 单元 〈Adaline) 网 络 ， 不 仅 在 计 
算 机 上 对 该 网 络 进行 了 烧 拟 ， 而 且 还 做 成 了 硬件 。 同 时 ， 他 们 还 担 出 了 Widrow-Hoft 学 习 
算法 ， 改 进 了 网 络 权 值 的 学 习 速度 和 精度 ， 后 来 这 个 算法 被 称 为 LMS 算法 ， 即 数学 上 的 
最 速 上 降 法 ， 这 种 算法 在 以 后 的 BP 网 络 及 其 他 信号 处 理 系统 中 得 到 了 广泛 的 应 用 。 ; 

2， 低 潮 时 期 1 

1969 年 ， 美 国 麻 省 理工 学 院 著名 的 人 工 暂 能 专家 M. Minsky 和 $. Papert 帮 同 出 版 了 名 
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为 《感知 器 》 的 专著 ， 指 出 单 层 的 感知 器 网 络 只 能 用 于 线性 问题 的 求解 ， 而 对 于 像 XOR 
〈 红 或 ) 这 样 简单 的 非 线性 问题 却 无 法 求解 。 他 们 还 指出 ， 能 够 求解 非 线性 问题 的 网 络 ， 
应 该 是 具有 隐 层 的 多 层 神 经 网 络 ， 而 将 感知 器 模型 扩展 到 多 层 网 络 是 否 有 意义 ， 还 不 能 从 
理论 上 得 到 有 力 的 证 明 。Minsky 的 翡 观 结论 对 当时 神经 网 络 的 研究 是 一 个 沉重 的 打击 。 由 
于 当时 计算 机 技术 还 不 够 发 过 ，VLSI 尚未 出 现 ， 神 经 网 络 的 应 用 还 没有 展开 ， 而 人 工 智 
能 和 专家 系统 正 处 于 发 展 的 高 潮 ， 因 而 很 多 人 放弃 了 对 神经 网 络 的 研究 ， 致 使 在 这 以 后 的 
10 年 中 ， 神 经 网 络 的 研究 进入 了 一 个 缓慢 发 展 的 低潮 期 。 

虽然 在 整个 20 世纪 70 年 代 ， 对 神经 网 络 理论 的 研究 进展 缓慢 ， 但 并 没有 完全 停顿 下 
来 。 世 界 上 一 些 对 神经 网 络 抱 有 坚定 信心 和 严 下 科 学 态度 的 学 赫 一 直 没 有 放弃 他 们 的 努 
力 。 许 多 神经 网 络 模型 ， 如 线性 神经 网 络 模型 、 自 组 织 识别 神经 网 络 模型 以 及 将 神经 元 的 
输出 函数 与 统计 力学 中 的 玻 耳 兹 蜡 分 布 相 联系 的 Boltzmamn 机 模型 等 ， 都 是 在 这 个 时 期 出 
现 的 。 

3， 复兴 时 期 

美国 加 州 理工 学 院 生物 物理 学 家 John. 工 Hopfield 博士 在 1982 年 和 1984 年 先后 发 表 了 
两 篇 十 分 重要 的 论文 ， 在 他 所 提出 的 Hopfield 网 络 模型 中 首次 引入 了 网 络 能 量 的 概念 ， 并 
给 出 了 网 络 稳定 件 判 据 。Hopfieid 网 络 不 仅 在 理论 分 析 与 综合 上 均 达 到 了 相当 的 深度 ， 最 
有 意义 的 是 该 网 络 很 容易 用 集成 电路 来 实现 。Hopfieid 网 络 引起 了 许多 科学 家 的 理解 与 重 
祝 ， 也 引起 了 半导体 工业 界 的 重 祝 。1984 年 ，AT&T Bell 实验 室 宣 布 利用 Hopfield 理论 研 
制 成 功 了 第 一 个 硬件 神经 网 络 芯片 。 尽 管 时 期 的 Hopfield 网 络 还 存在 一 些 问题 ， 但 不 可 和 否 
认 ， 正 是 由于 Hopfield 的 研究 才 点 亮 了 神经 网 络 复兴 的 火把 ， 从 而 掀起 了 神经 网 络 研究 的 
热潮 。 

如 果 说 Hopfield 的 研究 成 果 打 破 了 神经 网 络 理 论 10 年 徘徊 的 局 面 ， 那 么 1986 年 D. E. 
Rumeihart 和 J 工 .McCelland 及 其 研究 小 组 提出 的 PDPP (Parallel Distributed Processing) 网 
络 思想 ， 则 为 神经 网 络 研究 新 高 潮 的 到 来 起 到 了 推 波 助 淹 的 作用 。 龙 其 是 他 们 提出 的 误差 
反 向 传播 算 法 ， 即 BP 算法 ， 已 成 为 至 今 影响 最 大 、 应 用 最 广 的 一 种 网 络 学 习 算法 。 

4. 发 展 高 潮 期 

20 世纪 80 年 代 中 期 以 来 ， 神 经 网 络 的 应 用 研究 取得 了 很 大 的 成 绩 ， 涉 及 面 非 常 广 . 
泛 。 为 了 适应 人 工 神经 网 络 的 发 展 ，1987 年 成 立 了 国际 神经 网 络 学 会 ， 并 于 同年 在 美国 圣 
地 亚 哥 召开 了 第 一 届 国 际 神经 网 络 会 议 。 此 后 ， 神 经 网 络 技术 的 研究 始终 呈现 出 基 勃 活跃 
的 局 面 ， 理 论 研 究 不 断 深入 ， 应 用 范围 不 断 扩大 。 尤 其 是 进入 20 世纪 9 年 代 ， 随 着 IEEE 
神经 网 络 会 刊 的 癌 世 ， 各 种 论文 专著 逐年 增加 ， 在 全 世界 范围 内 逐步 形成 了 研究 神经 网 络 
前 所 未 有 的 新 高 潮 。 

从 众多 神经 网 络 的 研究 和 应 用 成 果 不 难 看 出 ， 神 经 网 络 的 发 展 具有 强大 的 牛 命 力 。 尽 

1 管 当前 神经 网 络 的 智能 水 平 还 不 高 ， 许 多 理论 和 应 用 性 问题 还 未 得 到 很 好 的 解决 ， 但 是 ， 
随 着 人 们 对 大 脑 信 息 处 理 机 制 认识 的 日 益 深 化 ， 以 及 不 同 智能 学 科 领 域 之 间 的 交叉 与 渗 
; 透 ， 人 工 神经 网 络 必 将 对 智能 科学 的 发 展 发 挥 更 大 的 作用 。 
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1.2 ”神经 网 络 的 应 用 及 研究 方向 


神经 网 络 作为 一 种 新 的 方法 体系 ， 具 有 分 布 并 行 处 理 、 非 线性 映射 、 白 适应 学 习 和 和 鲁 
棒 容 错 等 特性 ， 这 使 得 它 在 模式 识别 、 控 制 优化 、 知 能 信息 处 理 以 及 故障 诊断 等 方 而 玫 右 
广泛 的 应 用 。 

旧 前 ， 神 经 网 络 的 研究 可 以 分 为 理论 研究 和 应 用 猎 究 两 大 方面 。 

埋 论 研究 可 分 为 以 下 两 类 : 

41) 利用 神经 生理 与 认 知 科 学 研究 人 脑 思维 及 智能 机 再。 

(2) 利用 神经 科学 基础 理论 的 研究 成 果 ， 用 数 昌 方法 探索 智能 水 拉 更 高 的 人 工 神 经 网 
络 模型 ， 深 入 研究 网 络 的 算 汰 和 性能 〈 如 稳定 性 、 收 和 敛 性 、 容 错 性 、 鲁 棒 性 等 )， 开 发 狐 
的 网 络 数理 理论 〈 如 神经 网 络 动力 学 、 非 线性 神经 马 等 )。 

训 用 研究 可 分 为 以 下 两 类 : 

(D 神经 网 络 的 软件 模拟 和 使 件 实现 的 研究 。 

人) 神经 网 络 在 各 个 领域 中 应 用 的 人 研究， 这些 领域 主要 包括 模式 识别 、 信 号 处 理 、 知 
识 工程 、 专 家 系统 、 优 化 组 合 、 智 能 控制 等 。 

随 着 神经 网 络 理论 本身 以 及 相关 理论 、 丰 关 技 术 的 不 断 发 展 ， 神 经 网 络 的 尿 用 必 将 更 
加 深入 和 广 江 。 


1.3 MATLAB 6.x 神经 网 络 工具 箱 (4.0 版 本 ) 简介 


MATLAB 神经 网 络 工具 箱 4.0 版 本 足 Mathworks 公司 最 新 推出 的 MATLAB 6.x 高 性 能 
可 视 化 数值 计算 软件 的 组 成 部 分 。 它 主要 针对 神经 网 络 系统 的 分 析 与 设计 ， 提 供 了 大 量 可 
供 吉 接 调 用 的 工具 箱 函数 、 令 形 用 户 界面 和 Simulink 仿真 工具 ， 是 进行 神经 网 络 系统 分 析 
与 设计 的 绝 佳 工具 。 与 以 征 的 MATLAB 神经 网 络 工 基 箱 相 比 ， 神 经 网 络 工具 箱 4.0 版 本 出 
现 了 许多 新 增 功能 ， 使 用 起 来 更 如 方便 。 这 些 新 增 功能 主要 包括 : 
@ 新 增 了 _= 个 专门 用 于 基于 神经 网 络 控制 系统 应 用 与 设计 的 Simulink 模块 : 神经 网 
络 预测 控制 器 模块 、 反 馈线 性 化 控制 器 模 执 和 模型 参考 自 适应 控制 器 模块 ， 极 大 
地 方便 了 基于 神经 网 络 的 控制 系统 设计 与 仿真 。 
提供 了 神经 网 络 没 计 与 仿真 GUI， 使 用 户 能 够 方 使 地 通过 图 形 用 户 界面 进行 神经 
网 络 的 设计 与 仿真 。 
昌 ”改进 并 新 增 了 四 个 神经 网 络 训练 函数 ，trainb 、trainc 、trainr，trains， 其 中 trainb 
用 于 批量 式 训练 ， 其 他 三 个 函数 则 用 于 渐进 式 训练 。 
虽 。 改进 了 线性 神经 网 络 设计 疯 数 newlind， 使 其 能 够 对 多 输入 、 多 输出 的 线性 神经 
网 络 进行 直接 设计 。 - 
m。 改进 的 “提前 停止 ”算法 可 以 和 贝 叶 斯 正则 化 方法 联合 使 用 ， 从 而 可 以 更 好 地 提 3 
高 神经 网 络 的 推广 或 泛 化 能 力 。 : 
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2.1 神经 网 络 的 基本 概念 


2.1.1 神经 元 模型 

神经 网 络 的 基本 单元 称 为 神经 元 ， 它 是 对 生物 神经 元 的 简化 与 模拟 。 神 经 元 的 特性 在 
旺 种 程度 上 决定 了 神经 网 络 的 总 体 特性 。 大 量 简单 神经 元 的 相互 连结 即 构成 了 神经 网 络 。 
一 个 典型 的 具有 枣 维 输入 的 神经 元 模型 可 以 用 名 2.1 来 加 以 撕 述 。 


输入 神经 元 
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图 2.1 神经 元 模型 


由 图 2.1 可 见 ， 一 个 典型 的 神经 元 模型 主要 由 以 下 五 部 分 组 成 。 

(D 输入 。 

站 ,po 代表 神经 元 的 妇 个 输入 。 在 MATLAB 中 ， 输 入 可 以 用 一 个 尺 XL 维 的 列 
矢量 训 来 表示 《其 中 了 表示 取 转 置 ) 


昌 =[PiypaPRIT 
@) 网 络 权 值 和 阔 值 。 
| wavmareama 代 表 网 络 权 值 ， 表 示 输 入 与 神经 元 间 的 连接 强度 ，? 为 神经 元 网 信 ， 
可 以 看 作 是 一 个 输入 恒 为 ! 的 网 络 权 信 。 在 MATLAB 中 ， 神经 元 的 网 络 权 值 可 以 用 一 个 


: 1XR 维 的 行 矢 量 w 来 表示 : 
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多 三 [wa win] 


阔 值 加 为 1X! 的 标量 。 

值得 注意 的 是 ， 不 论 是 网 络 权 值 还 是 半 都 是 可 调 的 。 正 是 某 于 神经 网 络 权 值 和 疯 侍 
的 动态 调节 ， 神 经 元 万 至 神经 网 络 才 得 以 表现 出 某 种 行为 特性 。 因此， 网 络 权 值 和 阔 值 的 
可 凋 性 足 神 经 网 络 学 习 特 性 的 基本 内 镜 之 一 。 

(3) 求 和 单元 。 

求 和 单元 完成 对 输入 信 痣 的 加 权 求 和 ， 妈 


n= 立 pw， 十 声 


这 是 神经 元 对 输入 信 苇 处 理 的 第 .个 过 程 。 在 MATLAB 庄 半 中， 该 过 程 可 以 通过 输 
入 矢量 和 权 值 失 量 的 点 积 彤 式 加 以 描述 ， 即 
了 =Ws*p+b 
(4 传递 函数 。 
在 图 2.1 中 ,表示 神经 元 的 传递 永 数 或 激发 函数 ， 它 用 士 对 求 和 单元 的 计算 结果 进行 
函数 运算 ， 得 到 神经 元 的 输出 ， 这 是 神 经 元 对 输入 信和 号 处 理 的 第 一 个 过 程 。 才 2-1 给 出 了 
几 种 典型 的 神经 元 传递 未 数 形式 及 描述 。 


表 2-1 几 种 典型 的 神经 元 传递 浮 数 形式 
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0G5) 输出 。 
输入 信号 经 神经 元 加 权 求 和 及 传递 六 数 作 用 后 ， 得 到 最 终 的 输出 为 
@= 了 (WP 十 缚 
车 取 传 递 函 数 为 hardlim 肯 数 ， 则 神经 元 输出 可 用 MATLAB 诸 句 表示 为 
as=hardlimCw*p+b) 
为 了 描述 方 使 ， 图 2.1 所 示 神 经 元 模型 可 以 用 图 2.2 所 示 的 缩 略 形式 加 以 描述 。 






































Q 一 op 十 及 


图 2.2 ”神经 元 模型 的 缩 略 并 式 


在 图 22 中 ， 黑 色 矩 形 块 代表 神 经 元 的 输入 矢量 及 为 输入 矢量 的 维 数 ， 四 代表 加 权 
求 和 运算 单元 : 为 传递 函数 运算 单元 。 可 见 ， 该 图 简洁 清晰 地 描述 了 神经 元 的 结构 特性 
及 其 对 输入 信号 的 处 理 过 程 。 以 后 各 章节 中 均 采 用 这 种 形式 对 神经 元 或 神经 网 络 进行 
描述 。 


2.1.2 ”神经 网 络 的 结构 与 类 型 


和。 和 神经 网 络 的 基本 结构 及 描述 
神经 网 络 是 由 大 量 简单 神经 元 相互 连接 构成 的 复杂 网 络 。 一 个 典型 的 共有 丸 维 输入 、 
S 全 神经 元 的 单 层 神经 网 络 模型 可 以 用 图 2.3 来 加 以 描述 。 





输入 神经 元 层 
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图 23 单 层 神经 网 络 模型 
# 在 图 2.3 中 , 为 RX1 维 的 输入 矢量 ， 网 络 层 由 权 值 矩 阵 W(SXR)、 阔 值 矢 量 
# 58KSx D、 求 和 单元 @ 和 传递 函数 运算 单元 组 成 ，S 个 神经 元 的 箱 出 组 成 了 SX1 维 的 神 
:经 网 络 输出 矢量 
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ae= AHp+ 丰 
其 中 ， 输 入 层 网 络 权 值 针 阵 本 移 值 矢量 二 的 具体 形式 如 下 


YN 已 
os 册 忆 
证 = 机 | 
We Wesa 忆 


在 单 层 神经 网 络 基础 上 可 以 构造 多 层 神经 网 络 。 一 个 典型 的 一 层 神 经 网 络 模型 如 隆 
2.4 所 示 。 


输入 层 中 间 层 输出 层 
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图 24 _: 层 神经 网络 模 地 
产生 神经 网 络 最 终 和 输出 的 网 络 层 称 为 输出 层 ， 输 入 层 和 中 问 层 也 称 为 隐 层 。 图 2.4 所 


示 的 神经 网 络 三 层 神经 元 的 数目 分 别 为 ， $ 、 吕 、 哇 。 为 了 描述 方便 ， 采 用 二 标 法 对 神经 
网 络 中 相关 元 素 加 以 标记 ， 其 中 ，PY7 1S4X 忆 表示 输入 层 权 值 算 阵 ，ZW2 :0S2 XSD) 和 
ZWHa 2SX 另 分 别 表示 第 一 层 到 第 二 层 、 第 一 层 到 第 芋 层 的 网 络 层 权 值 拓 阵 。 下 、 瑟 、 加 
分 别 表示 各 层 的 网 络 阐 值 失 量 。 神 经 网 络 的 输出 为 


= PEW2 户 (Fa FIDP+)+B2)+B2)=》 


2.， 神经 网 络 的 分 类 

神经 网 络 的 类 型 多 种 多 样 ， 它 们 是 从 不 同 角度 对 生物 神经 系统 不 同 层次 的 抽象 和 模 
拟 。 从 功能 特性 和 学 习 特 性 来 分 ， 典 型 的 神经 网 络 模型 主要 包括 感知 器 、 线 性 神经 网 络 、 
BP 网 络 、 径 向 基 遇 数 网 络 、 自 组 织 映 射 网 络 和 反馈 神经 网 络 等 。 一 般 来 说 ， 当 神经 元 的 
模型 确定 之 后 ， 一 个 神经 网 络 的 特性 及 其 功能 主要 取决 丁 网 络 的 拓扑 结构 及 学 习 方法 。 从 
网 络 拓扑 结构 角 谨 来 看 ， 神 经 网 络 可 以 分 为 以 下 四 种 基本 形式 。 

(D 前 向 网 络 。 

前 向 网 络 结构 如 图 2.5 (a) 所 示 。 网 络 中 的 神经 元 是 分 层 排列 的 ， 每 个 神经 元 只 与 前 
一 层 神 经 元 相连 。 最 上 一 层 为 输出 层 ， 最 一 层 为 输入 层 。 输 入 层 和 中 间 层 也 称 为 隐 层 。 
耻 层 的 层 数 可 以 是 一 屋 或 多 层 ， 前 向 网 络 在 神经 网 络 中 应 用 十 分 广泛 ， 感 知 器 、 线 性 网 
络 、BP 网 络 都 属于 这 种 类 型 。 
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(2) 从 输出 到 输入 有 反馈 的 前 向 网 络 。 
从 输出 到 输入 有 反馈 的 前 向 网 络 结构 如 图 2.5 (#) 所 示 。 该 网 络 本 身 是 前 向 型 的 ， 但 
输入 有 反馈 回路 。Fukushima 网 络 就 属于 这 种 类 型 。 


是 与 上 一 种 不 司 的 是 从 输出 到 
(3) 必 内 互 连 前 向 网 络 。 


层 内 互 连 前 向 网 络 结构 如 岁 2.5 〈《c) 所 示 。 通 过 层 内 神经 元 的 相互 连接 ， 可 以 实现 同 
从 而 可 以 将 层 内 神经 元 分 为 几 组 ， 让 每 组 作为 一 个 整体 来 动 


一 层 神 经 元 之 间 的 相互 制约 ， 

作 。 一 些 自 组 织 竞争 型 神经 网 
() 互连网 络 。 
互连网 络 结构 如 图 25【( 


G) 所 示 。 皇 连 网 


络 就 属于 这 种 类 型 。 











络 叶 





每 个 神经 元 的 输出 都 与 





接 关 系 。Hopfield 网 络 和 Boltzmann 网 络 就 属 了 














他 神经 元 相连 ， 











人 a) 前 向 网 络 





此 外 ， 根 据 


网 络 和 动态 网 络 。 动 态 网 络 中 通常 全 有 


全 有 反馈 的 前 向 网 络 


图 25 神经 网 络 的 典型 拓扑 结构 





(ce) 层 内 互 连 前 向 网 络 


络 又 分 为 局 部 开 连 利 全 互 连 两 种 。 全 扎 连 网 
而 局 部 互连网 络 中 ， 有 些 神经 元 之 间 没 有 连 
于 这 -网 络 类 型 。 


3 天 当 


( 侣 互连网 络 


网 络 输 入 或 网 络 层 中 是 否 含有 延迟 或 反馈 环节 ， 还 可 把 神经 网 络 分 为 静态 
网 络 输入 延迟 或 反馈 环节 ， 比 如 自 适 应 滤波 线性 神 


经 网 络 和 Hopfield 网 络 ， 静 态 神经 网 络 中 则 不 含 任何 延迟 或 反馈 环节 。 


2.1.3 ”神经 网 络 的 仿真 
神经 网 络 的 仿真 过 程 实质 上 是 神经 





网 络 根据 网 络 输入 数 


据 ， 通 过 数值 计算 得 出 相应 网 


络 输出 的 过 程 。 通 过 仿真 ， 我 们 可 以 及 时 了 解 治 前 神经 网 络 的 性 能 ， 从 而 决定 是 否 对 网 络 


进行 进一步 的 训练 。 根 据 网 络 输入 数 


采取 不 同 的 形式 。 


对 于 静态 神经 网 络 ， 


由 于 网 络 H 





据 形式 和 神经 网 络 的 不 





1 后 顺序 对 仿 实 结果 没有 任何 影响 。 
还 是 序列 形式 《数据 顺序 有 先后 ， 在 MAILAB 上 
; 静态 网 络 的 仿真 结果 都 是 相同 的 。 

由 于 网 络 


;先后 )， 








对 于 动态 神经 网 络 ， 




















同类 型 ， 神 经 网 络 的 仿真 可 以 


不 含有 任何 延迟 或 反馈 环节 ， 所 以 网 络 输入 数据 的 先 
此 ， 网 络 输入 数据 不 论 是 采用 矩阵 形式 〈 数 据 顺序 无 
通常 坟 单 元 数组 的 形式 表示 )， 








已 含有 反馈 或 延迟 环节 ， 





而 网 络 的 仿真 输出 不 仅 与 当 








j 前 的 网 络 输入 数据 有 关 ， 而 且 还 与 过 去 的 输入 数据 有 关 ， 即 与 输入 数据 的 先后 顺序 有 关 。 
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央 此 ， 当 动态 神经 网 络 接受 以 序列 形式 描述 的 输入 数据 时 ， 即 使 只 是 序列 中 数据 元 素 的 顺 
序 不 同 ， 仿 真 结果 也 会 截然 不 同 。 


2.1.4 神经 网 络 的 学 习 与 训练 


学 习 特性 是 神 绿 网 络 的 基本 特性 ， 神 经 网 络 的 学 习 与 训练 是 通过 网 络 权 值 和 靖 值 的 调 
节 来 实现 的 。 根 据 学 习 过 程 的 组 织 和 管理 方式 不 同 ， 学 习 算 法 可 分 为 有 监督 学 习 和 无 监督 
学 习 两 大 类 。 
对 于 有 监督 学 习 〔 如 图 2.6 所 永 )， 网 络 

训练 往往 要 基于 一 定数 量 的 训练 样 例 或 样 用 
本 ， 训 练 样本 通常 由 输入 矢量 和 目标 矢量 组 

成 。 在 学 习 和 训练 过 程 中 ， 神 经 网 络 不 断 地 和 辣 人 组 成) 

将 其 实际 输出 与 目标 输出 进行 比较 ， 并 根据 











比较 结果 或 误 莹 ， 按 照 一 定 的 规则 或 算法 对 权 值 / 闭 值 调节 

网 络 权 值 和 效 值 进行 调节 ， 从 而 使 网 络 的 输 

出 逐渐 接近 目标 值 。 最 典型 的 有 监督 学 习 算 图 2.6 有 监督 学 习 原 理 图 
法 的 代表 是 BP 〈Back Propagation ) 算法 一 一 

误差 反 向 传播 算法 。 





无 监督 学 习 是 一 种 自 组 织 学 习 ， 即 网 络 的 学 习 过 程 完全 是 一 种 自我 学 习 的 过 程 ， 不 需 
要 提供 学 习 样本 或 外 界 反馈 。 在 学 习 过 程 中 ， 网 络 只 需 响 应 输入 信号 的 激励 ， 按 照 某 种 规 
则 反复 调节 网 络 权 值 和 阔 值 。 直 到 最 后 形成 某 种 有 序 的 状态 。 例 如 ， 在 很 多 情况 下 ， 无 监 
督学 习 算法 可 以 用 来 做 聚 类 分 析 ， 即 通过 学 习 将 输入 模式 划分 为 有 限 的 模式 类 别 。 庆 监督 
学 习 算法 的 典型 代表 尾 Hebb 学 习 律 。 

根据 每 次 网 络 训练 任务 景 的 不 同 ， 神 经 网 络 的 训练 方式 可 分 为 渐进 式 训练 和 批量 式 训 
练 。 渐 进 式 训练 〈Incremental Training) 是 一 种 在 线 学 习 方式 ， 即 神经 网 络 每 接收 一 对 输 
入 矢量 和 日 标 矢量 ， 使 对 网 络 权 值 和 冰 值 进行 适时 的 调整 而 批量 式 训练 《Batch 
Training 》 则 是 在 所 有 的 输入 矢量 和 目 极 矢量 集 准备 完成 之 后 才 开始 根据 相应 的 学 习 算法 对 
网 络 权 值 和 阅 值 进行 批量 调整 。 渐 进 式 训练 和 批量 式 训练 既 适 用 于 动态 网 络 ， 也 适用 于 静 
态 网络 。 同 一 神经 网 络 ， 采 用 两 种 不 同 的 训练 方式 得 出 的 训练 结果 是 不 同 的 。 

在 MATILAB 6x 中 ， 对 神经 网 络 的 训练 统一 由 train 通 数 和 adapt 明 数 来 完成 。train 函 
数 只 能 对 网 络 进行 批量 式 训练 〈 若 训练 数据 为 序列 形式 ， 则 在 训练 前 tain 函数 会 自动 将 其 
转换 为 矩阵 或 矢量 形式 )， 它 是 通过 调用 在 生成 网 络 对 象 net 时 所 定义 的 训练 算法 
(nettrainFen》 来 完成 不 同类 型 网 络 的 训练 。adapt 范 数 一 般 用 于 渐进 式 训 练 ， 也 可 以 用 于 
批量 式 训 练 ， 当 训练 样本 数据 采用 迭 阵 或 矢量 形式 时 ， 进 行 指 量 式 训练 ; 当 训练 样本 数据 
采用 序列 形式 时 ， 则 进行 浙 进 式 训练 。adapt 函数 是 通过 调用 在 生成 网 络 对 象 net 时 所 定义 
的 训练 算法 net.adaptFcn) 来 完成 不 同类 型 网 络 的 训练 。 

在 神经 网 络 学 习 和 训练 过 程 中 ， 选 用 何 种 训练 方式 ， 采 用 何 种 训练 函数 ， 应 该 根据 具 
体 的 网 络 形式 和 具体 问题 的 类 型 与 要 求 而 定 。 
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2.2 ”感知 器 神经 网 络 











感知 器 (Perceptron) 是 由 美国 学 者 FE Rosenblatt 本 1957 年 在 M-P 模型 和 Hehb 学 习 
律 的 基础 上 提出 来 的 ， 它 是 一 个 具有 单 层 计算 神经 元 的 神经 网 络 ， 网 络 的 传递 函数 是 线性 
阔 值 单元 。 原 始 的 感知 器 神经 网 络 只 具有 一 个 神经 元 ， 主 要 被 用 来 模拟 人 脑 的 感知 特征 ， 
出 于 采用 阔 值 单元 作为 传递 函数 ， 所 以 感知 器 神经 元 只 能 输出 两 个 值 ， 即 只 具有 两 个 状 
态 。 感 知 器 特别 适用 于 简单 的 模式 分 类 问题 。 当 它 旋 于 两 类 模式 的 分 类 时 ， 相 当 于 在 高 维 
样本 空间 ， 用 一 个 超 平 面 将 两 类 桩 本 分 开 。F Rosenblatt 已 经 证 明 ， 如 果 两 类 模式 是 线性 
可 分 的 〔 指 存在 一 个 超 平面 将 它们 分 开 )， 则 算法 定 是 收敛 的 。 但 是 ， 单 层 感知 器 网 络 
只 能 用 来 解决 线性 可 分 问题 ， 而 对 于 非 线 性 或 线性 不 可 分 问题 则 无 能 为 力 。 


2.2.1 ”感知 器 神经 网 络 结构 


1， 感 知 器 神经 元 寞 型 

图 2.7 描述 了 - -个 由 阔 值 函数 (hardfim》 运算 单元 组 成 的 感知 器 神经 元 。 采 用 阔 值 函 
数 作为 神经 元 的 传递 函数 是 感知 器 神经 元 的 典型 特征 。hardiim 的 嘎 数 形式 参见 表 2-1。 可 
见 ， 当 wp + 睛 2 和 时， 神经 元 输出 ae=1> 当 wp + B<0 时 ， 神 经 元 输出 c=0。 显 然 ，wp + 主 
构成 了 感知 器 神经 元 输出 的 决策 边界 。 

正 是 基于 闭 值 函数 的 二 值 特 性 ， 使 得 感 向 器 神经 元 可 以 将 输入 W 维 空间 划分 为 两 个 互 


不 重生 的 区 域 。 对 十 一 个 具有 _ 维 输入 的 感知 器 神经 元 ， 当 权 值 Wi =1，wia =2 ， 阅 
值 瑟 = -2 时 ， 它 对 输入 二 维 平 面 的 划分 情况 如 图 2.8 所 示 。 


由 上 述 神经 元 确定 的 决策 边界 方程 为 
wp+B5=[L2p+(C2)= 让 +2p: 一 2=0 























输入 感知 器 神经 元 














4 一 hardlim(wp 十 六 


图 27 ”感知 器 坤 经 元 异型 2.8 感知 器 神经 元 对 一 维 平面 的 划分 情况 
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2 感知 器 神经 网 络 结构 

单 层 感 知 器 神经 网 络 结构 如 图 29 所 示 。 
网 络 兴 有 尺 维 输入 ， 通 过 权 值 矩 阵 TWIGSIXR) 输入 已 知 器 层 
与 引 个 感知 器 神经 元 相连 ， 感 知 器 的 输出 为 








Q& =hardlim(CzW + 坟 ) 


由 图 29 可 见 ， 感 知 器 神经 网 络 只 有 - 层 
神经 元 ， 这 是 出 感知 器 学 习 规 则 所 决定 的 ， 




















为 感知 器 学 习 规 则 只 能 训练 单 层 神经 网 络 。 感 an 二 
知 器 神经 网 络 这 种 结构 上 的 局 限 性 也 在 一 定 程 ee 
度 上 限制 了 其 应 用 范围 。 图 29 起 知 党 神经 站 络 结构 图 


2.2.2 ”感知 器 神经 网 络 的 设计 


1、 感 知 器 神经 网 络 的 生成 及 初始 化 
函数 newp 可 以 用 来 生成 一 个 感知 器 神经 网 络 ， 其 调用 格式 为 
net=newp(BPR,S) 
其 中 ，PR 为 丸 X2 维 矩 阵 ， 表 示 尽 维 输入 和 失 量 中 每 维 输入 的 最 小 值 和 最 大 值 之 间 的 范围 : 
S 表示 感知 器 网 络 中 神经 元 的 个 数 ， 函数 返回 值 net 代表 生成 的 感知 器 神经 网 络 对 象 。 在 
MATLAB 中 ，net 是 以 结构 体 的 形式 加 以 存储 的 ， 视 经 网 络 对 象 的 详细 结构 可 参见 3.1 
节 。 下 面 所 给 代码 表示 生成 一 个 具有 二 维 输入 、 两 个 神经 元 的 感知 器 网 络 。 


net = newp{f [-2,+2;-2, +2],2) 
妈 =mnetLIW {1,1} 














W= 

人 0 0 

0 0 
b=hnet.b {1} 
b= 

0 





0 
可 见 ， 示 例 中 竺 成 的 感知 器 网 络 初始 权 值 和 效 值 均 为 零 ， 这 是 因为 在 生成 网 络 对 象 
时 ，newp 已 使 用 默认 的 初始 化 函数 initzero 对 网 络 的 权 值 和 阔 值 进行 了 零 初 始 化 。 用 户 可 . 
以 改变 初始 化 函数 的 形式 ， 并 使 用 init 函数 对 网 络 重新 进行 初始 化 ， 例 如 : ; 
netLinputweights{1, 1}. InitFcn = rands'; 
netbiases{f1}.InitFcn = Tands'; 
net = initnet; 








12 基于 MAILAB 6.x 的 系统 分 析 与 设计 一 一 神经 网 络 [ 





W=netiIW{(L1) 


W= 
0.2137 0.7826 
0.0280 0.5242 
b=netbfl} 
b= 
0.9003 
-0.5377 


2 感知 器 神经 网 络 的 学 习 规 则 
函数 leamp 二 在 感知 器 神经 网 络 学 习 过 程 中 计算 网 络 权 值 和 值 修正 量 最 基本 的 规则 
函数 ， 该 学 习 规则 的 基本 原理 为 
权 值 增 量 : A 厂 =G-apT=epT 
值 增 量 : Ahk= 4-@g(OD=e 
权 值 更 新 ， 栈 习 = 且 史上 +A 有 
阅 值 更 新 : 六 "” = 古 o 吧 十 和 
其 中 ，p 为 输入 矢量 ， 学 习 误 益 e 为 目标 矢量 5 和 网 络 实际 输 岂 矢量 4 之 间 的 差 值 。 上 述 
原理 对 应 的 MATLAB 语句 为 
e=t 一 3 
dW=iearmnp(W,p,[], [1[[],e [5 六 
曲 = 台 
到 =W+dW; 
b=b+ db; 
由 上 述 原理 不 难 发 现 ，leamp 函数 的 学 习 规 则 要 受 输 入 矢量 ?大 小 变化 的 影响 。 当 输 
入 样本 矢量 中 含有 奇异 样本 点 时 ， 往 往 会 导致 感知 器 神经 网 络 的 学 习 训练 时 间 加 长 ， 因 此 
为 了 消除 训练 时 间 对 奇异 样本 的 敏感 性 ， 可 以 对 上 述 算法 作 如 下 改进 : 
4A 研 =(-apTAIPH= ep71ipll 
显然 ， 改 进 后 的 算法 ， 即 归 一 化 感知 器 学 习 规则 对 输入 样本 矢量 的 大 小 变化 不 敏感 。 
感知 器 归 一 化 学 习 规则 可 以 通过 调用 函数 leampn 加 以 实 更 。 
3， 感 如 器 神经 网 络 的 训练 与 仿真 
感知 器 神经 网 络 的 训练 可 以 通过 反复 调用 adapt 函数 或 直接 调用 train 函数 来 完成 。 采 
用 adapt 函数 对 感知 器 网 络 进行 训练 的 格式 为 
[net y,e] = adapt (neb p,t) 
中 ，net 为 训练 前 、 后 的 网 络 对 象 ，y 和 e 分 别 为 训练 后 网 络 的 输出 和 误差 。 
: 采用 tmain 函数 可 以 以 批量 训练 方式 对 感知 器 网 络 进行 训 练 ， 训 练 速度 较 快 ， 但 不 能 保 
: 证 每 次 训练 结果 都 能 达到 要 求 。train 函数 的 常用 调用 格式 为 


net = train (net, p, 全 
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对 上 感知 器 网 络 的 训练 ， 建 议 采 用 adapt 函数 ， 因 为 已 经 让 明 ， 对 于 任何 一 个 线性 可 
分 问题 ， 利 用 adapt 函数 经 过 有 限 步 训练 均 可 收 黎 ， 但 对 于 train 函数 则 不 能 保证 这 一 点 。 
利用 sim 函数 可 以 对 感知 器 神经 网 络 进行 仿真 ， 从 而 检验 网 络 的 输出 和 训练 结果 。sim 
通 数 的 常用 格式 为 
a=Sim (Beb p) 
值得 注意 的 是 ， 在 经 过 足够 多 的 训练 和 仿真 之 后 ， 如 果 网 络 的 性 能 还 是 达 不 到 要 求 ， 
则 应 仔细 分 析 -下 ， 即 感知 器 神经 网 络 是 将 适合 解决 当前 问题 。 


2.2.3 ”感知 器 神经 网 络 的 局 限 性 


出 于 感知 器 神经 网 络 在 结构 和 学 习 规则 上 的 局 限 性 ， 使 得 其 应 用 也 受到 一 定 的 限制 。 
首先 ， 由 本 感知 器 网 络 的 神经 元 传递 函数 采用 hardlim 遂 数 ， 所 以 只 能 输出 0 或 工 两 个 
值 ， 其 次 ， 单 层 感知 器 神经 网 络 只 能 解决 
线性 可 分 问题 ， 即 只 能 对 线性 可 分 的 输入 15 
样本 矢量 进行 分 类 ， 而 对 于 线性 不 可 分 问 



































ee 
题 则 无 能 为 力 。 例 如 ， 对 于 如 图 210 所 示 
的 两 类 点 集 ， 仅 采用 单 层 感知 器 神经 网 络 。 0 十 
尼 不 可 能 找到 一 条 次 策 这 界 将 两 半点 集 分 。 中 
开 的 。 一 05 十 o 
解决 线性 不 可 分 问题 的 途径 有 两 种 ， 
一 足 采 用 多 层 感知 器 网 络 ， 二 是 采用 功能 2 一 和 让 
更 强大 的 神经 网 络 ， 如 BP 网 络 等 ， 这 将 在 
以 后 各 章节 中 加 以 讨论 。 本 210 线 生 和 分 上 人 
2.3 ”线性 神经 网 络 


线性 神经 网 络 是 最 简单 的 一 种 神经 网 络 ， 它 由 一 个 或 多 个 线性 神经 元 构成 。1960 年 由 
B， Widrow 和 M. E. Hoft 提出 的 自 适应 线性 单元 〔〈Adaline) 网 络 是 线性 神经 网 络 最 早 的 典 
型 代表 。 线 性 神经 网 络 采用 线性 函数 作为 传递 函数 ， 因 此 其 输出 可 以 取 任 意 值 。 线 性 神经 
网 络 可 以 采用 基于 最 小 二 乘 算法 (LMS) 的 Widrow-Hoff 学 习 规 则 来 调节 网 络 的 权 值 和 阐 
值 ， 其 收敛 速度 和 精度 都 有 较 大 的 改进 。 此 外 ， 采 用 newlind 函数 还 可 以 直接 根据 网 络 的 
输入 矢量 和 目标 矢量 设计 出 期 望 的 线性 网 络 。 和 感知 器 神经 网 络 一 样 ， 线 性 神经 网 络 只 能 














反映 输入 和 输出 样本 矢量 问 的 线性 映射 关系 ， 它 也 只 能 解决 线性 可 分 问题 。 线 性 神经 网 络 ; 


在 函数 氢 合 、 信 和 号 滤波 、 预 测 和 控制 等 方面 都 有 者 广泛 的 以 用 。 
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2.3.1 ”线性 神经 网 络 结构 


1， 线 性 神经 元 模型 

线性 神经 元 模型 的 结构 如 图 2.11 所 示 。 

与 感知 器 神经 元 不 同 的 是 ， 线 性 神经 元 采用 的 传递 函数 为 线性 上 数 purelin， 其 输入 与 
输出 之 问 是 简单 的 纯 比例 关系 。purelin 卫 数 的 具体 形式 参见 表 2-1。 线 性 神经 元 的 输出 可 
以 取 企 意 值 ， 芯 输入、 输出 关系 为 


8 =putrelin(wp 十 加 一 WP 十 瑟 


2. 线性 神经 网 络 结构 
图 2.12 给 出 了 具有 只 维 输入 的 单 层 〈 包 含 S 个 神经 元 ) 线性 神经 网 络 模型 。 

















输入 线性 神经 元 输入 线性 神经 元 层 
『 FF 1 
机 1 
请 、 着 [和 
请 Z 四 

人 上 上 人 本 

a 一 puelin(wp 十 全 TiRWDTH 
图 2.11 ”线性 神经 元 模型 图 2.12 ”线性 神经 网 络 


2.3.2 ”线性 神经 网 络 设计 


1， 线 性 神经 网 络 的 生成 及 初始 化 
利用 函数 newlin 可 以 生成 一 个 线性 神经 网 络 。 其 常用 的 格式 为 
met = newtin (PR ,S) 
中 ，PR 为 RX2 维 矩 阵 ， 表 示 R 维 输入 矢量 中 每 维 输入 的 最 小 值 和 最 大 值 之 间 的 范围 ， 
S 表示 线性 神经 网 络 的 输出 个 数 ， 即 网 络 层 神经 元 的 个 数 ， 函 数 返回 变量 net 为 生成 的 线 
性 神经 网 络 对 象 。 在 线性 网 络 生成 的 同时 ，newlin 已 调用 默认 的 初始 化 函数 initzero 对 网 
络 权 值 和 贱 值 进行 了 零 初始 化 。 和 感知 器 神经 网 络 的 初始 化 一 样 ， 用 户 可 以 任意 改变 线性 
网 络 权 值 和 阔 值 的 初始 化 函数 ， 并 使 用 init 函数 对 网 络 重 新 进行 初始 化 。 
2， 线 性 神经 网 络 的 学 习 规则 
线性 神经 网 络 权 值 和 赣 值 的 学 习 规 则 采用 的 是 基于 最 小 二 乘 原理 的 Widrow-Hoft 学 习 
算法 。 基 于 Widrow-Hoff 学 习 算法 的 权 值 和 岗 值 调节 原理 如 下 : 
醋 作 +D= 丽 ( 拉 + 上 AR ，5(E+TD= 坟 ED+AB(K) 
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其 中 
2 2 
AH(D= -ee 2 A5(=-C 反思 
山寺 
ae2(00 ae ae2(k) ，，ae 
5 0 动 2 人) 功 
月 有 
9e 9 De 
- 双 -< ED-( 卫 * 一 双 -- 
这 = 和 kb- 玫 PUD+B]= -PR 天 =-1 


所 以 ， 上 述 权 值 和 阔 值 的 调节 公式 可 灾 为 
本 才 +D= 厂 (人 +20e(K)P (人 (天 二 DJ 二 z(K) 十 20e( 天 ) 


即 王八 +TD = 全 ( 人 +Tetk)DT() 五 ( 炎 十 JJ 一 B(k)+TTe(K) 


其 中 ， 了 为 学 习 速 率 。 当 妖 较 大 时 ， 学 习 速率 加 快 〈 刀 到 值 过 人 时 有 可 能 使 学 习 变 得 不 稳 
定 )， 反 之 亦 然 。 
在 MATLAB 中 ，Widrow-Ho 交 学 习 算 法 对 应 的 学 习 函数 为 learnwh。 
3. 线性 神经 网 络 的 调 练 和 仿真 
对 线性 神经 网 络 的 训练 可 以 调用 train 函数 完成 。 利 用 train 函数 对 线性 神经 网 络 进行 
训练 实际 上 是 根据 所 给 的 “输入 一 日 标 ”样本 矢量 集 ， 调 用 神经 网 络 生 成 时 所 定义 的 权 值 
和 阔 值 学 习 函 数 learnwh 对 网 络 不 断 进行 调节 ， 最 终 使 网 络 输出 接近 目标 输出 的 过 程 。 下 
面 的 代码 给 出 了 - -个 典型 的 具有 二 维 输入 线性 神经 元 的 训练 过 程 。 
了 =[L2,-103;2,20.-1]; 
t= 各 ,0, 1 缮 ; 
net = newlin  [-2,2;-2,2]. 1 
nettrainParam.goal = 0.01; 
[net, tr] = train ( net, Pt 
训练 中 会 显示 如 下 信息 : 
TRAINB, Epoch 0/100, MSE 0.570.01. 
TRAINB, Epoch 25/1100, MSE 0.121667/0.01. 
TRAINB, Epoch 50/100, MSE 0.033473970.01. 
TRAINB, Epoch 75/100, MSE 0.01211170.01. 
TRAINB, Epoch 82/100, MSE 0.0098314T0.01. 
TRAINB, Performance goal met, 
可 见 ， 当 训练 到 第 82 步 时 ， 网 络 性 能 达标 。 此 时 的 权 值 和 阔 值 永 阵 为 
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W=netIW{LI)} 


W= 

-0.1854 0.2112 
b = netb{f11} 
b= 


0.6973 
利用 sim 等 相关 上 蛆 数 可 以 对 训练 好 的 线性 神经 网 络 进行 仿真 和 误 荐 分析 : 
=sim(nebP) 
三 
0.0894 -0.0959 0.8827 0.9086 
error =t- 太 
error = 
-0.0894 0.0959 0.1173 0.0914 
Imse= mse (error) 
mse = 
0.0098 
4 线性 神经 网 络 的 直接 设计 法 
与 其 他 神经 网 络 设计 不 同 的 是 ， 线 性 神经 网 络 串 以 根据 输入 利口 标 矢量 直接 设计 赂 
来 。 函 数 newlind 无 须 经 过 训练 ， 就 可 以 直接 设计 出 线性 神经 网 络 ， 使 得 网 络 实际 输出 与 
日 标 输出 的 平方 和 误差 SSE 为 最 小 ， 其 常用 烙 式 为 
Pet= newlind (了 , 工 ) 


2.3.3 自 适 应 滤波 线性 神经 网 络 


1， 自 适应 滤波 线性 神经 网 络 结构 
自 适应 滤波 是 线性 神经 网 络 一 个 很 重要 的 应 用 。 白 适应 滤波 线性 神经 网 络 〈 人 简称 自 适 
应 滤波 网 络 ) 是 线性 神经 网 络 的 一 种 特殊 形式 ， 它 与 一 般 线性 神经 网 络 的 不 辣 之 处 在于 自 
适应 滤波 网 络 引入 了 如 图 2.13 所 示 的 延迟 链 TDL。 
可 见 ， 自 适应 滤波 网 络 的 输入 是 由 同一 输入 信号 的 若 十 延迟 信号 所 构成 的 ， 即 有 
pa 和 = pa 





Pda( 人 = PP 一 D 


pdav(= PE-N+D 


; 一 个 典型 的 自 适应 滤波 网 络 的 结构 如 图 2.14 所 示 ， 其 中 ， 线 性 层 只 有 一 个 神经 元 。 该 
神经 网 络 的 输出 为 


和 
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a( 旨 = purelin(wp+= > w,P(K-i+D+ 


TDL TDL 线性 层 





图 2.13 TDL 延迟 链 前 2.14 自首 应 让 波 网 络 结构 
可 见 ， 自 适应 滤波 网 络 的 输出 是 由 输入 信和 号 P( 昌 及 其 延迟 信号 的 线性 组 合 构成 的 ， 这 
正好 与 数字 信号 处 理 领 域 所 谓 的 有 限 冲 击 响应 (FIR) 滤波 器 的 结构 形式 相 吻合 。 
当然 ， 自 适应 滤波 网 络 的 线性 层 也 可 以 由 多 个 线性 神经 元 组 成 。 一 个 典型 的 具有 多 个 
神经 元 的 白 适 应 滤波 网 络 结构 如 图 2.15 所 示 。 图 2.16 给 出 了 其 缩 略 形式 描述 图 。 


TDL 线性 计 











阻 2.15 具有 3 个 神经 元 的 自 适 应 让 波 网 络 


具有 3 个 神经 元 的 线性 庆 





网 2.16 其 有 S 个 神经 元 的 自 适 应 弯 波 网 络 的 缩 略 形式 
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迄今 为 止 ， 自 适应 滤波 网 络 已 成 为 应 用 最 为 广泛 的 神经 网 络 之 一 ， 它 在 信号 滤波 、 项 
测 与 控制 等 领域 都 有 着 广泛 的 应 用 。 本 书 第 四 章 给 出 了 关于 自 适 应 滤波 网 络 的 几 个 典型 应 
用 实例 。 

2， 自 适应 汪 波 线性 神经 网 络 设计 狠 和 ， 广 线 t 导 

白 适 应 滤波 网 络 的 生成 可 以 采用 两 科 的 
方式 :一 种 是 通过 调用 newlin 函数 直接 生 
成 带 有 延迟 链 的 自 适应 滤波 网 络 ， 另 一 种 
则 是 首先 利用 newlin 函数 生成 不 带 延 迟 链 










有 内 一 PE 一 了 
































的 线性 网 络 ， 然 后 通过 网 络 重 定义 将 和 卉 RAT 
链 加 入 顶 生成 的 线性 网 络 中 。 图 2.17 为 一 ip 分 
个 单 神 经 元 自 适 应 滤波 网 络 的 结构 示 图 2.17 单 神经 元 自 适 应 滤波 网 络 
意图 。 

该 自 适应 滤波 网 络 订 以 采用 如 下 两 种 方式 来 生成 《假设 网 络 输入 范围 为 [0，10]): 

方式 一 : 

net = newliin( 10,10] ,1,[012]) 
方式 


net = newlin ( [0,10] , 1) 
netinputWeights{l,1)}.delays=E0 1 2; 
其 中 ，[0 1 2 ] 中 各 元 素 分 别 表示 白 适 应 滤波 网 络 各 维 输入 所 对 应 的 延迟 量 。 下 面 我 们 允 所 
生成 的 自 适 应 滤波 网 络 分 别 进行 初始 化 、 仿 真 和 训练 。 
白 适 应 滤波 网 络 的 初始 化 与 一 般 揭 线性 神经 网 络 基本 相同 ， 上 只 是 在 初始 化 网 络 权 值 和 
疝 值 的 同时 ， 抽 适应 滤波 网 络 还 要 对 延迟 输入 的 初始 值 进行 设置 。 
首先 ， 对 网 络 初始 权 值 和 阀 值 进行 设置 : 
netLIW{t1}=[7,8,9]; 





met.bfl} = 0; 
其 次 ， 在 对 网 络 进行 仿真 之 前 需要 对 延迟 输入 请 ( 和 户 ( 旭 的 初始 值 进行 设置 ， 
Pi={ft,3 和 
即 对 应 忆 (0) =1，Pa(O)=3。 
定义 输入 矢量 如 下 : 


P={3,4,5.6) 
现在 可 以 调用 sim 函数 对 上 面 所 创建 的 自 适应 滤波 网 络 进行 仿 真 : 
fa,pflj=sim(net, 忆 ,Pi); 
a = - 
[4] [79] f94] [18] 

pf= 
: 晤 | 苔 | 、。 
: 其 中 ，Pf 为 仿真 后 延迟 输入 的 终 值 。 有 兴趣 的 读者 可 以 利用 笔算 对 上 述 网 络 的 仿真 结果 加 
:3 以 验证 ， 以 便 能 更 好 地 理解 白 适 应 滤波 网 络 的 工作 原理 。 


全 
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下 面 ， 利 用 adapt 首 数 对 白 适 应 滤波 网 络 进行 训练 ， 使 月 适应 滤波 网 络 能 够 根据 输入 
序列 P 输出 期 望 的 日 标 序列 T。 
T={10.20.30,40)， 
net.adaptParam.passes = 500: 
[net,y,e1=adaptlnet,P,T,pi75 
经 过 训练 ， 网 络 的 实际 输出 啊 应 为 
y= 
[11.2888] 122.9083] [27.5403] [39.4193] 
见 ， 训 练 结果 基本 注意 ， 要 想得到 更 高 的 匹配 精度 ， 还 需 娄 继续 对 网 络 进行 训练 。 
此 外 ， 还 可 以 采用 newlind 明 数 对 上 述 下 适应 滤波 网 直接 进行 设计 ， 即 
met= newlind(P .了 工 ,pi); 
y=simftnet, 了 )》 
y= 
[10.0000] [20.0000] {30.0000] [40.00001 
可 网， 利用 newlind 半数 直接 设计 出 的 白 适 应 滤波 网 络 实现 了 有 零 误 兰 输 出 。 


2.3.4 ”线性 神经 网 络 的 局 限 性 


线性 神经 网 络 只 能 反映 输入 和 输出 样本 矢量 间 的 线性 映射 关系 ， 和 感知 器 神经 网 络 “ 
样 ， 它 也 只 能 解决 线性 可 分 问题 。 由 十 线性 昼 经 网 络 的 误 共 曲面 是 一 个 多 维 抛物 面 ， 所 以 
在 学 习 速 率 是 够 小 的 情况 下 ， 对 上 基于 最 小 一 乘 梯度 下 降 原理 进行 训练 的 线 性 神经 网 络 总 
可 以 找到 一 个 最 优 解 。 但 是 ， 尽 管 如 此 ， 对 线 忻 神经 网 络 的 训练 并 不 一 定 总 能 达到 零 误 
差 。 线 性 神经 网 络 的 训练 性 能 要 受 网 络 规模 和 训练 样本 集 大 小 的 限制 。 若 线性 神经 网 络 的 
自贡 度 《 即 神 名 岗 绝 所 有 机 信和 网 值 的 个 才 和 小 于 训练 样 涉 集 中 “输入 一 目标 ”矢量 
的 对 数 ， 且 各 样本 矢量 与 线性 无 关 ， 则 网 络 训练 不 可 能 达到 零 误 次 ， 而 只 能 得 到 一 个 使 网 
络 误差 最 小 的 解 ， 反 之 ， 若 网 络 自 量度 人 于 样本 集 的 个 数 ， 则 会 得 到 无 穷 多 个 使 网 络 训练 
误差 为 堆 的 解 。 此 外 ， 值 得 注意 的 是 ， 线性 神经 竟 络 的 训练 和 性 能 要 受到 学 习 速率 参数 的 
影响 ， 过 大 的 学 习 速率 可 能 会 导致 网 络 性 能 发 散 。 


2.4 BP 神经 网 络 














BP 神经 网 络 通常 是 指 基 寺 误 养 反 向 传播 算法 (BP 算法 ) 的 多 层 前 向 神经 网 络 ， 它 是 
D. BE _ Rumeihart 和 本 L. MeCelland 及 其 研究 小 组 在 1986 年 研究 并 设计 出 来 的 。BP 算法 已 
成 为 日 前 应 用 最 为 广泛 的 神经 网 络 学 习 算法 ， 据 统计 有 近 90% 的 神经 网 络 应 用 业 基 于 BP 
算法 的 。 与 感知 器 和 线性 神经 网 络 不 同 的 是 ，BP 网 络 的 神经 元 采用 的 传递 函数 通常 丰 ; 
Sigmaoid 型 可 微 函 数 ， 所 以 可 以 实现 输入 各 输出 问 的 任意 非 线性 映射 ， 这 使 得 它 在 诸如 函 : 
数 远近、 模式 识别 、 数 据 访 缩 等 领域 有 着 更 加 广泛 的 应 用 。 





So 
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2.4.1 BP 神经 网 络 结构 


1、BP 神经 元 模型 

图 2.18 给 出 了 一 个 基本 的 BP 神经 元 模型 ， 与 其 他 神经 元 模型 不 同 的 是 ，BP 神经 元 
模型 中 的 传递 函数 太 通常 取 可 微 的 单调 递增 轴 数 ， 如 对 数 Sigmoid 函数 jogsig、 平 切 
Sigmoid 函数 tansig 和 线性 函数 purelin 等 。 

BP 网 络 最 后 一 层 神经 元 的 特性 决定 了 整个 神经 网 络 的 输出 特性 。 治 最 后 一 层 神 经 元 
采用 Sigmoid 型 昂 数 时 ， 那 么 整个 网 络 的 输出 就 被 限制 在 一 个 较 小 的 范围 内 ， 如果 最 后 一 
层 神经 元 采用 purelin 型 盟 数 ， 则 整个 网 络 输出 可 以 取 任意 值 。 














输入 BP 神 经 元 




















ao 一 fp 十 四 1 
网 2.18 。BP 神经 元 模型 图 2.49 BP 神经 网 络 结构 


2，BP 神经 网 络 结构 

BP 神经 网 络 通常 采用 基于 BP 神经 元 的 多 层 前 向 神经 网 络 的 结构 形式 。 一 个 典型 的 
BP 网 络 结构 如 图 2.19 所 示 。 

BP 神经 网 络 通 常 具 有 一 个 或 多 个 隐 层 ， 其 中 ， 隐 层 神经 元 通常 采用 Sigmoid 型 传递 函 
数 ， 而 输出 层 神经 元 则 采用 purelin 型 传递 浮 数 。 图 2.20 给 出 了 一 个 具有 单 隐 层 的 BP 神经 
网 络 模型 ， 其 中 ， 输 入 维 数 为 2， 隐 层 含有 4 个 神经 元 ， 采 用 tansig 作为 传递 函数 ， 输 出 
层 包含 3 个 神经 元 ， 采 用 purelin 传递 函数 。 理 论 已 经 证 明 ， 具 有 如 图 2.20 所 示 结 构 的 BP 
神经 网 络 ， 当 隐 层 神经 元 数目 足够 多 时 ， 可 以 以 任意 精度 盘 近 任何 一 个 具有 有 限 间断 点 的 
非 线性 函数 。 

















输入 科 层 输出 层 











可 一 amsigGWtP 十 加 ) 呈 一 purelinGELWzsgl 十 的 


疼 2.20 有 共有 单 陷 层 的 BP 神经 网 络 
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2.4.2 BP 神 经 网 络 设计 


上 BP 神经 网 络 的 生成 及 初始 化 
采用 newff 函数 可 以 用 来 生成 BP 网 络 。newff 函数 的 常用 格式 为 
net = newff(PR ,[S1S2 … SN1,{TEFITF2 … TEN } ,BITF) 

其 中 ，PR 为 丸 X2 维 矩 阵 ， 表 示 尺 维 输入 矢量 中 每 维 输入 的 最 小 值 与 最 大 值 之 间 的 范围 ; 
堵 神经 网 络 具有 N 层 ， 则 [ S1 S2 … SN ] 中 各 元 素 分 别 表 示 各 层 神经 元 的 数目 ，{TEF1 
TE2 … TFN } 中 各 元 素 分 别 表 示 各 层 神经 元 采用 的 传递 函数 ，BTEF 表示 神经 网 络 训练 时 所 
使 用 的 训练 函数 。 例 如 ， 下 面 代码 表 示 生 成 -个 两 层 BP 神经 网 络 ， 其 中 ， 输 入 维 数 为 
2， 各 维 输入 的 取 值 范围 分 乔 为 10 ,10 ] 和 [-1 , 2 1 输入 层 和 输出 层 神 经 元 的 个 数 分 别 为 5 
和 1， 各 层 神经 元 的 传递 函数 分 别 取 tansig 函数 和 purelin 函数 ，BP 网 络 的 训练 函数 取 


trainlm: 





net=newff(L0,.10;-1,21, [5 ,11, (tansig ,purelin } trainlm 六 

anet 为 后 成 的 BP 网 络 对 象 。new 和 全 在 生成 BP 网 络 的 同时 即 对 网 络 各 层 的 权 值 和 阔 值 自动 
进行 了 初始 化 ， 根 据 不 同 的 锚 求 ， 用 户 可 以 对 各 层 网 络 权 值 或 山 值 的 初始 化 肯 数 重新 定 
义 ， 关 使 用 init 晒 数 重新 对 网 络 进行 初始 化 。 

2，BP 神经 网 络 的 学 习 规 则 

BP 神经 网络 的 学 习 规则 ， 即 权 值 和 疝 值 的 调节 规则 采用 的 是 误 凑 反 向 传播 算法 〈BP 
算法 )。BP 算法 实际 上 是 Widrow-Hoff 算法 在 多 层 前 向 神经 网 络 中 的 推广 。 和 Widrow- 
Hoff 算法 类 似 ， 在 BP 算法 中 ， 网 络 的 权 值 和 阔 值 通常 是 沿 着 网 络 误差 变化 的 负 梯度 方向 
进行 调节 的 ， 最 终 使 网 络 误 益 达 到 极 小 值 或 最 小 值 ， 即 在 这 一 点 误差 梯度 为 零 。 

限 十 风度 下 降 算法 的 册 有 有 缺陷， 标准 的 BP 学 习 算法 通常 共有 收敛 速 度 锰 、 易 赂 入 局 
部 极 小 债 等 缺点 ， 因 此 出 现 了 许多 改进 揭 算 法 ， 我 们 将 在 下 一 节 对 这 些 算法 进行 介绍 。 

3，BP 神经 网 络 的 训练 和 仿 趴 

人 在 BP 神经 网 络 牛 成 和 初始 化 以 后 ， 即 可 利用 现 有 的 “输入 一 目标 ”样本 矢量 数据 对 
网 络 进行 名 练 。BP 网 络 的 训练 通常 采用 train 函数 来 完成 。 针 对 不 同 的 问题 ， 在 训练 之 前 
有 必要 对 网 络 的 训练 参数 nettrainParam 进行 适当 的 设置 。 表 2-2 列 出 了 网 络 对 象 的 一 些 主 
此 训练 参数 及 含义 。 








表 2-2 ， 几 个 主要 的 神经 疗 比 训练 参数 及 含义 





























训练 参数 参数 含义 默认 值 
nettrainParam.epochs 训练 步 数 100 
nettrainParamn.show 显示 训练 结果 的 间隔 步 数 25 
mettirainParam_goal 训练 日 标 误 差 0 
nettrainParam time， 训练 允许 时 间 Inf 
nettrain_.Param_min_grad 训练 中 最 小 花 许 梯度 值 te-6 








是 四 


22 基于 MATLAB 6.x 的 系统 分 析 与 设计 神经 网 络 苹 





在 设置 完 训 练 参 数 之 后 ， 就 可 以 谢 用 train 函数 对 BP 网 络 进行 训练 了 。train 函数 的 常 

用 焙 式 如 下 : 
Tanet ,tr]=trainfnet,P,T) 

其 中 ，P 为 输入 样本 矢量 集 ，T 为 对 应 的 日 标 样本 矢量 集 ， 等 号 右 、 左 两 侧 的 net 分 别 用 于 
表示 训练 前 、 后 的 神经 网 络 对 象 ; tr 存储 训练 过 程 中 的 步 数 信息 和 误 美 。 训 练 过 程 
中 ,训练 函数 会 根据 设 定 的 nettrainParam.show 值 白 动 显 未 当前 训练 结果 信息 ， 并 给 出 网 
络 误差 实时 变化 曲线 。 当 训练 步 数 大 于 nettrainParamepochs 、 训 练 误 站 小 于 
nettrainParam.goal 、 训 练 时 间 超 过 nettrainParamtime ， 或 误 兰 赔 度 利 小 于 
nettrainParam.min_grad 时 ， 训 练 都 将 被 自动 终止 ， 并 返 辐 训练 后 的 神经 网 络 对 象 。 

为 了 提高 神经 网 络 的 训练 效率 ， 在 某 些 情况 下 需要 对 “输入 一 目标 ”样本 集 数据 作 必 
要 的 预 处 理 。 如 利用 premnmx 或 prestd 函数 可 以 对 输入 和 日 标 数据 集 进行 遇 一 化 处 理 ， 使 
其 落 入 [-1.] 区 间 ; 利用 prepca 通 数 可 以 对 输入 样本 集 进 行 主 元 分 析 ， 以 减 小 输入 各 样本 
矢量 间 的 相关 性 ， 从 而 起 到 降 维 的 日 的 。 有 关上 疯 数 的 详细 使 用 方法 参见 3.2.19 小 节 。 

利用 sim 冰 数 可 以 对 训练 后 的 网 络 进行 仿 真 。 此 外 ， 神 经 网 络 .工具 箱 还 提供 了 postreg 
函数 ， 该 函数 可 对 训练 后 网 络 的 实际 输出 〈 仿 真 输出 ) 和 日 标 输出 作 线性 回归 分 析 ， 以 检 
验 神 经 网 络 的 训练 效果 。 


2.4.3“BP 神经 网 络 的 快速 学 习 算法 与 选择 




















为 了 克服 常规 BP 学 习 算法 的 缺陷 ，MATLAB 神经 网 络 工具 箱 对 常规 BP 算法 进行 了 
改进 ， 并 提供 了 一 系列 快速 学 习 算法 ， 以 满足 解决 不 同 问题 的 需要 。 

快速 BP 算法 从 改进 途径 上 可 分 为 两 大 类 : 一 类 是 采用 启 发 式 学 习 方法 ， 如 引入 动量 
因子 的 学 习 算法 〈traingdm 函数 )、 变 学 习 速 率 学 习 算 法 (taingda 函数 ) 和 “弹性 ”学 习 
算法 〈trainrp 函数 ) 等 ， 另 一 类 则 是 采用 更 有 效 的 数值 优化 方法 ， 如 共 氏 梯 度 学 习 算法 
(和 包括 traincgf、traincgp、traincgb、trainscg 等 光 数 )、quasi-Newton 算法 (包括 trainbfg、 
trainoss 等 抑 数 ) 以 及 Levenberg-Marquardt 优化 方法 〈trainlm 函数 ) 等 。 

对 于 不 同 的 问题 ， 在 选择 学 可算 法 对 BP 网 络 进行 训练 时 ， 不 仅 要 考虑 算法 本 身 的 性 
能 ， 还 要 视 问 题 的 复杂 度 、 样 本 集 大 小 、 网 络 规模 、 网 络 误差 垦 标 和 所 要 解决 的 问题 类 型 
(判断 其 属 于 “ 范 数 拟 合 ”还 是 “模式 分 类 ”问题 ) 而 定 。 表 2-3 对 几 种 典型 的 快速 学 
习 算 法 进行 了 比较 ， 以 作为 选择 学 习 算法 的 参考 。 


表 2-3 ” 几 种 典型 的 快速 学 习 算法 性 能 的 比较 





























学 习 算 法 适用 问题 类 型 收 伍 性 能 ] 占用 存储 空间 其 他 特点 
忻 能 随 网 络 规模 增 
trainlm | 了 数 拟 合 收 敏 快 ， 收 笋 误差 小 大 大 而 灾 关 
性 能 晨 网 络 训练 误 
tminrp | 模式 分 类 | 收 伊 最 快 较 小 | 关 沽 小 而 刘 关 
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续 表 
trainscg 角 数 拟 合 、 模 式 分 类 | 收 伍 较 快 ， 性 能 稳定 中 等 郊 上 其 通用 于 岗 络 规 
模 较 大 的 情况 
trainbfg 场 数 拟 合 收 敏 较 快 较 大 计算 时 随 网 络 规 收 
的 增 大 中 几何 增长 
通用 十 “提前 停 
traingdx | 模式 分 类 收效 较 慢 较 小 止 ”方法 ， 可 提高 网 
络 的 推广 能 力 
2.4.4 BP 神经 网 络 推广 能 力 的 提高 
推广 能 力 (Generalization》 是 衡量 神经 网 络 性 能 好 坏 的 重要 标志 。… 个 “过 度 训 练 ” 
(Overfiting) 的 神经 网 络 可 能 会 对 训练 樟 本 集 达到 较 高 的 匹配 效 床 ， 但 对 于 一 个 新 的 输 


入 样 木 矢 量 却 可 能 会 产生 与 日 杯 矢量 差别 较 大 的 输 山 ， 即 神经 网 络 不 具 右 或 具有 较 差 的 扒 
广 能 力 。MATLAB 神经 网 络 工具 箱 给 出 了 遇 种 用 于 提 商 神经 网 络 推广 能 力 的 方法 ， 即 二 则 
化 方法 (Regularization ) 和 提前 停 小 〈Early stopping ) 方法 ， 下 面 分 别 对 这 两 种 方法 作 - 
介绍 。 

1 正则 化 方法 

在 训练 样本 集 大 小 一 定 的 情况 上， 网 络 的 推广 能 力 与 网 络 的 规模 直接 相关 。 如 果 神 经 
网 络 的 规模 远 远 小 上 训练 样本 集 的 大 小 ， 则 发 生 “ 过 度 训 练 ”的 机 会 就 很 小 ， 但 是 对 于 特 
定 的 问题 ， 确 定 合适 的 网 络 规模 《通常 指 隐 层 神经 元 数目 ) 往往 是 一 件 十 分 困难 的 事情 。 
正则 化 方法 是 通过 修正 神经 网 络 的 训练 忻 能 函数 来 提高 其 推广 能 力 的 。 一 般 情 况 下 ， 神 经 
网 络 的 训练 性 能 场 数 采用 均 方 误 关 亲 数 mse， 即 


1 妃 :>_ 1T 忆 > 
mse= 方 半 (7 = 方 记 人 -人 
在 让 则 化 方法 中 ， 网 络 竹 能 函数 经 改进 变 为 如 下 形式 : 


msereg = Y .mse 二 (一 7)msw 


其 中 ，7 为 比例 系数 ，msw 为 所 有 网 络 权 值 平 方 和 的 平均 值 ， 即 
1 女 ， 
msw = 斑 疡 必 


可见， 通过 采用 新 的 性 能 指标 函数 ， 可 以 在 保证 网 络 训练 误 益 尽 可 能 小 的 情况 下 使 网 
络 具有 较 小 的 权 值 ， 即 使 得 网 络 的 有 效 权 值 尽 可 能 少 ， 这 实际 上 相当 于 自动 缩小 了 网 络 的 
规模 。 

常规 的 正则 化 方法 通常 很 难 确定 比例 系数 y 的 大 小 ， 而 贝 叶 斯 正则 化 方法 则 可 以 在 网 : 
络 如 练 过 程 中 自 适应 地 调节 》 的 大 小 ， 并 使 其 达到 最 优 。 在 MATLAB 工具 箱 中 ， 贝 时 斯 
正则 化 方法 是 通过 rainbr 本 数 来 实现 的 。 实 践 证 明 ， 采 用 trainbr 函数 训练 后 的 BP 网 络 具 
有 较 寻 的 推广 能 力 ， 血 俏 得 注意 的 图 ， 该 算法 只 适用 于 小 规模 网 络 的 函数 拟 合 或 到 近 问 
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题 ， 不 适用 于 解决 模式 分 类 问题 ， 而 且 其 收 敏 速 虔 - - 般 比 较 慢 。 采 用 贝 叶 斯 正则 化 方法 提 
高 网 络 推广 能 力 的 实例 参见 4.3 小 节 的 例 4.13。 

2， 提 前 停止 

“提前 停止 ”是 提高 神经 网 络 推广 能 力 的 另 -种 有 效 方法 。 在 该 方法 中 ， 训 练 样 本 集 
在 训练 之 前 需要 被 划分 为 训练 集 、 验 证 集 或 测试 集 ， 其 中 测试 集 可 选 。 训 练 集 用 于 对 神经 
网 络 进行 训练 ， 验 证 集 用 于 在 神经 网 络 训练 的 同时 监控 网 络 的 训练 进程 。 在 训练 初始 阶 
段 ， 验 证 集 形成 的 验证 误差 通常 会 随 着 网 络 训练 误 共 的 减 小 而 减 小 ， 但 是 汉 网 络 开始 进入 
“过 度 训练 ”时 ， 验 证 误差 就 会 逐渐 增 大 ， 当 验证 误 准 增 大 到 一 定 程度 时 ， 网 络 训练 会 提 
前 停止 ， 这 时 训练 函数 会 返回 当 验 证 误差 取 最 小 值 时 的 网 络 对 象 。 测 试 集 形成 的 测试 误差 
在 网 络 训练 时 未 被 使 用 ， 但 它 可 以 用 来 评价 网 络 训练 结果 和 样本 集 划分 的 合理 性 。 昔 测试 
误差 与 验证 误 痊 分 别 达到 最 小 值 时 的 训练 步 数 益 别 很 大 ， 或 两 者 曲线 的 变化 蚁 势 差别 较 
大 ， 则 说 明 样 本 集 的 划分 不 是 很 合理 ， 需 要 重新 划分 。 

“提前 停止 ”方法 可 以 和 任何 一 种 BP 算法 结合 起 来 使 用 ， 其 缺点 是 需要 对 样本 集 进 
行 划 分 ， 且 划分 的 合理 性 不 易 控制 。 采 用 了 “提前 停止 ”方法 的 rain 函数 ， 其 调用 格式 为 

Enet ,tr] = train (net, ptr,ttr [] .[] ,val,test 让 
或 “〈 当 不 提供 测试 集 时 ) 
[net ,好 ] = train (net ,ptr ,ttr,[] .1 val 入 

其 中 ，ptr 和 ttr 分 别 代表 训练 集 的 输入 矢量 和 日 标 矢量 ;val 为 验证 集 ，test 为 测试 集 ，val 
和 test 通常 采用 结构 体 的 形式 存 取 相 应 样本 集中 的 输入 矢量 和 目标 矢量 ， 例 如 valP 和 
valT 可 分 别 用 以 定义 验证 集 的 输入 矢量 和 日 标 矢量 。 采 用 “提前 停止 ”方法 提高 BP 网 络 
推广 能 力 的 实例 可 参见 生 3 小 节 的 例 4.14。 


2.4.5 BP 神经 网 络 的 局 限 性 


BP 神经 网 络 克服 了 域 知 器 网 络 和 线性 神经 网 络 的 局 银 性 ， 可 以 实 观 任意 线性 或 非 线 
性 的 函数 映射 。 然 而 ， 由 于 BP 神经 网 络 是 基于 梯度 上 降 的 误差 反 向 传播 算法 进行 学 习 
的 ， 所 以 其 网 络 训练 速度 通常 很 慢 ， 而 月 很 容易 陷入 局 部 极 小 点 ， 尽 管 采用 - 些 改进 的 快 
速 学 习 算 法 可 以 较 好 地 解决 某 些 实际 问题 ， 但 是 在 设计 过 程 中 往往 邦 要 经 过 反复 的 试 凌 和 
训练 过 程 ， 无 法 严格 保证 每 次 训练 时 BP 算法 的 收敛 性 和 合 局 最 优 性 。 此 外 ，BP 网 络 耻 层 
神经 元 前 作用 机 理 及 其 个 数 选择 已 成 为 BP 网 络 研究 中 的 一 个 难点 问题 。 

















2.5 径 向 基 辑 数 网 络 







径 向 基 函 数 〈 RBF 》 网 络 是 以 函数 逼近 理论 为 基础 而 构造 的 一 类 前 向 网 络 ， 这 类 网 
络 的 学 习 等 价 于 在 多 维 空间 中 寻找 训练 数据 的 最 住 拟 合 平面 。 径 向 枯 函 数 网 络 的 每 个 隐 层 
神经 元 传递 冰 数 都 构成 了 拟 合 平面 的 个 基 函 数 ， 网 络 也 由 此 而 得 名 。 和 谷 向 基 函 数 网 络 是 
1 一 种 局 部 逼近 两 络 ， 即 对 于 输入 空间 的 某 一 个 局 部 区 域 具 存在 少数 的 神经 元 用 于 决定 网 络 
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的 输 山 。 我 们 熟悉 的 BP 网 络 则 是 典型 的 全 局 逼近 网 络 ， 即 对 每 “个 输入 /输出 数据 对 ， 

网 络 的 所 有 参数 均 要 调整 。 由 于 一 老 的 构造 本 质 和 至 同 ， 径 癌 基 函数 网 络 Jj BP 网 络 相 比 规 
模 通 常 较 大 ， 但 学 习 速 度 较 快 ， 并 且 网 络 的 轿 数 帝 近 能 力 、 模 式 识别 与 分 类 能 力 都 优 丁 
后 者 。 

MAILAB 6x 神经 网 络 本 其 箱 提供 了 径 向 基 函 数 网络 以 及 它 的 两 种 重要 变型 一 一 上 义 
回归 网 络 和 概率 神经 网 络 ， 其 中 ， 广 义 回 归 网 络 适 用 于 解决 函数 台 近 问题 ， 概 率 神经 网 络 
多 用 来 解 次 分 类 问题 。 工 具 箱 函 数 newrhe 和 newrhb 可 用 于 设计 径 向 基 表 数 网 络 ， 冰 数 
newgrmn 和 newpnn 则 分 别 用 于 广义 问 归 网 络 和 概 认 神 经 网 络 的 设计 。 


2.5.1 径 向 基 函 数 网 络 
1、 径 向 基 邓 数 神经 元 模型 
一 个 具有 尽 维 输入 的 径 癌 基 范 数 神经 元 模型 如 图 2.21 所 示 。 图 中 的 | dist| 模 块 表 示 求 


取 输 入 矢量 和 权 值 矢量 的 距离 。 此 模型 中 采用 高 斯 函数 radbas 作为 径 向 基 神 经 元 的 传递 
欧 数 ， 其 输入 z 为 输入 矢量 P 和 权 值 矢量 w 的 距离 乘 以 阐 值 ， 。 
高 斯 范 数 radbas 是 典型 的 径 向 基 国 数 ， 其 表达 式 为 











(OOD=e 








共 函 数 曲 线 如 图 2.22 所 示 。 


输入 径 向 基 神 经 元 




















总 一 radbas( ‖w 一 站 玉 
图 221 具有 丸 维 输入 的 答 向 基 男 数 神经 总 图 2.22 。 高 斯 径 向 基 阔 数 巾 线 


中 心 与 宽度 是 径 向 基 函 数 神经 元 的 欺 个 重要 参数 。 神 经 元 的 权 值 矢量 w 确定 了 径 向 
基 闫 数 的 中 心 ， 当 输入 矢量 P 与 w 重合 时 ， 径 向 基 函 数 神经 扰 的 输出 达到 最 大 值 ， 当 输 
入 矢量 p 距离 w 越 远 时 ， 神 经 元 输出 就 越 小 。 神 经 元 的 阔 值 确定 了 径 向 基 函 数 的 宽 
度 ， 当 越 大 ， 则 和 输入 失 量 P 在 远离 w 时 函数 的 豪 减 幅度 就 越 大 。 

2， 径 向 基 函 数 网 络 的 结构 : 

一 个 典型 的 径 向 基 函 数 网 络 包括 两 层 ， 即 隐 层 和 输出 层 。 图 2.23 是 一 径 向 基 函 数 网 
络 的 结构 图 。 图 中 所 示 网 络 的 输入 维 数 为 R、 隐 层 神经 元 个 数 为 8、 输出 个 数 为 叶 ， 隐 : 
层 神经 元 采用 高 斯 函数 作为 传递 函数 ， 输 出 层 的 传递 本 数 为 线性 函数 。 图 中 a” 表 示 隐 层 
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输出 矢量 @ 的 第 让 个 元 素 ，w， 表 未 第 〖 个 隐 层 神经 元 的 权 值 矢量 ， 即 隐 层 神经 元 权 值 
和 拖 阵 王 ' 的 第 工行 。 


输入 径 向 基层 输出 层 





其 中 : 
吕 : 输入 矢量 的 维 孝 
8 第 和 民 神 经 元 的 


数 
28: 第 二 层 神经 元 的 
起 数 








二 一 mdbas( ww 到 7 他 一 purelin(Weal 十 ) 


疯 2.23 径 疝 共 图 数 网 络 结构 久 
3， 径 向 基 函 数 网 络 的 精确 设计 
函数 newrbe 可 用 来 精确 设计 径 咎 基 蚂 数 网 络 ， 所 谓 精 确 ， 是 指 该 阴 数 生成 的 网 络 刀 
于 训练 样本 数据 达到 了 零 误 准 。 函 数 newrbe 的 调用 形式 为 
net = newrbe(P,T,SPREAD ) 
其 中 ， P、T 分 别 为 输入 样本 矢量 集 和 输出 月 标 矢量 集 构 成 的 矩阵 : SPREAD 用 扩 展 党 
数 ， 其 缺 省 值 为 1， 捧 数 返 回 值 net 为 生成 的 网 络 对 象 ，net 中 的 权 值 和 疯 值 使 得 神经 网 
络 在 输入 为 P 时 可 以 精确 输 山 T ， 
函数 newrbe 在 建立 网 络 时 生成 的 隆 层 神经 并 信 数 与 危 隆 P 中 的 输入 失 刀 个 数 
间 ， 隐 叙 神 经 元 阔 值 取 为 0.8632/ SPREAD， 一 - 般 SPREAD 的 选取 要 足够 大 ， 以 保证 径 
向 基 神经 元 的 响应 在 输入 空间 能 够 交 迭 。 当 输入 失明 个 数 过 多 时 ， 利 用 newrbe 生成 的 网 
络 会 过 于 庞大 ， 从 而 使 网 络 实用 性 变 差 ， 因 此 在 实际 站 用 中 使 用 更 为 广泛 的 径 向 基 函 数 网 
络 设计 质数 是 newrb 函数 。 
4、 径 向 基 函 数 网 络 的 更 有 效 设 计 
函数 newzm 利用 选 代 方 法 设计 么 向 基 男 数 网 络 ， 该 方法 每 迭代 “次 就 增加 - 个 神经 
元 ， 直 到 平方 和 误差 下 降 到 日 标 误 答 以 下 或 隐 层 神经 元 个 数 达到 最 大 值 时 兴 代 停 上 上 。 函 数 
newrb 的 调用 形式 为 
net= newtb(P,T,GOAL ,SPREAD,MN ,DEF) 
其 中 ，GOAL 表示 目标 误差 ，MN 表示 最 大 神经 元 个 数 ，DEF 表示 人 迭代 过 程 的 显示 频率 。 


2.5.2 ”广义 回归 网 络 


1 广义 回归 网 络 的 结构 
; 广义 回归 网 络 (GRNN) 的 结构 与 径 向 基 肯 数 网 络 类 似 ， 如 图 2.24 所 示 。 该 网 络 的 
; 隐 层 和 输出 层 的 神经 元 个 数 均 与 输入 样本 撩 基 的 个 数 相同 ， 其 输出 层 是 特殊 线性 层 。 图 
224 中 的 nprod 模块 表示 计算 隐 技 输出 矢量 四 和 输出 层 权 值 撩 阵 W 的 规则 化 内 积 ， 
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即 对 内 积 所 得 失 量 中 的 每 一 元 素 分 别 除 以 e ”中 各 元 素 的 总 利 ， 因 此 广义 回归 网 络 是 一 种 
规则 化 的 径 向 基 函 数 网 络 。 





输入 径 向 基层 输出 层 (特殊 线性 层 ) 











可 一 madbas( | 一世) 呈 一 Purelin(sayeumte) 


图 2.24 三 义 回 归 网 络 结构 图 
广义 回归 网 络 常用 于 解决 函数 遂 近 问题 ， 当 隐 层 神经 元 足够 多 时 ， 该 网 络 能 够 以 任意 
精度 通 近 -个 平滑 函数 ， 其 缺点 在 二 当 输入 样本 数目 很 多 时 ， 网 络 | 分 旋 大 ， 计 算 复 杂 ， 
册 此 不 适用 于 训练 样本 数 记 过 多 的 情况 。 
2 广义 回归 网 络 的 设计 
上 文 同 归 网 络 可 利用 函数 newgmn 进行 设计 ， 其 调用 堪 式 为 
pnet= newgrmmn (P,T,SPREAD ) 
其 中 ，P、T 分 别 为 输入 样本 矢量 集 和 日 标 输 出 矢量 集 构 成 的 矩阵 ，SPREAD 是 扩展 常 
数 ， 其 缺 省 值 为 1，net 为 咕 数 生成 的 广义 回归 网 络 对 象 。 


2.5.3 ”概率 神经 网 络 


1， 概 率 神 经 网 络 的 结构 


概率 神经 网 络 是 径 癌 基 网 络 的 另 一 种 重要 变形 ， 其 结 攀 如 图 2.25 所 示 。 该 网 络 的 隐 
屁 神 经 元 个 数 与 输入 样本 饼 量 的 个 数 相同 ， 输 出 层 神经 元 个 数 等 于 训练 样本 数据 的 种 类 个 









































输入 径 向 基层 输出 层 (竞争 天 ) 





其 中 

Rs。 输入 矢量 的 维 数 

2， 输 入 /目标 矢量 对 的 个 数 ， 
即 隐 层 神经 元 的 个 数 

天 :输入 数据 种 类 的 个 数 , 即 
输出 层 神经 元 的 个 数 








四 =madbas(1 一 1 的) 2 一 compet(Wno0) 


网 2.25 ”概率 神经 网 络 结 梅 图 
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数 。 该 网 络 的 输出 层 是 竞争 层 ， 每 个 神经 元 分 别 对 应 于 一 个 数据 类 别 。 图 中 的 模块 C 表示 
竞争 传递 函数 ， 其 功能 是 找 出 其 输入 矢量 到 中 各 元 素 的 最 人 值 ， 并 且 使 与 最 大 值 对 应 类 
别 的 神经 元 输出 为 1， 其 他 类 别 的 神经 元 输出 为 0。 这 种 网 络 得 到 的 分 类 结果 能 够 达到 最 
大 的 正确 概率 。 

概率 神经 网 络 常用 来 解决 分 类 问题 。 当 训练 样本 数据 足够 多 时 ， 概 率 神经 网 络 收 和 敛 二 
一 个 贝 叶 斯 分 类 器 ， 而 且 推 广 性 良好 。 其 缺点 与 广义 四 归 网 络 相同 ， 即 当 输入 样本 数目 过 
多 时 ， 计 算 将 变 得 复杂 ， 因 此 运算 速度 比较 缓慢 。 

2、 概 率 神经 网 络 的 设计 

概率 神经 网 络 的 设计 孙 数 为 newpnn ， 其 调用 形式 为 

pet= newpnn (了 P,T,SPREAD ) 


其 中 ， 朋 标 失 量 矩阵 T 的 每 行 元 素 中 只 含有 一 个 1 ,其余 均 为 0 ，! 的 位 置 标号 表示 
与 该 行 对 应 的 畔 本 矢量 的 类 别 。 扩 展 常数 SPREAD 的 缺 省 值 为 0.1 ， 当 SPREAD 趋 近 
十 0 时 ， 网 络 趋 近 于 近邻 分 类 器 : 当 SPREAD 趋 近 于 co 时 ， 网 络 趋 近 寺 线性 分 
类 器 。 









































26 自 组 织 网 络 


在 生物 神经 细胞 中 存在 一 种 特征 敏感 细胞 ， 这 种 细胞 只 对 外 界 信号 刺激 的 某 一 特征 敏 
感 ， 并 且 这 种 特性 是 通过 自学 习 形成 的 。 在 大 脑 的 脑 皮层 中 ， 对 外 界 信号 刺激 的 感知 和 处 
理 是 分 区 进行 的 。 有 学 老 认为 ， 脑 皮层 是 通过 邻近 神经 细胞 的 相互 竞争 学 习 ， 自 适应 地 发 
展 成 为 对 不 同性 质 信号 敏感 的 区 域 。 根 据 这 些 现象 ， 芬 兰 学 者 Kohonen 提出 了 自 纽 织 特 
征 映 射 网 络 模型 (Self-Organizing Feature Map)。 他 认为 ， 一 个 神经 网 络 在 接受 外 界 输入 模 
式 时 ， 会 自 适应 的 对 输入 信号 特征 进行 学 习 ， 进 而 自 组 织 地 形成 不 同 区 域 ， 并 且 各 区 械 对 
输入 模式 将 具有 不 同 的 响应 特征 。 在 输出 空间 中 ， 这 些 神经 元 将 形成 一 张 映射 图 ， 映 租 
中 功能 相同 的 神经 元 靠 得 较 近 ， 功 能 不 同 的 神经 元 分 得 较 开 ， 自 组 织 特征 映射 网 络 也 由 此 
而 得 名 。 

自 组织 特 征 映射 过 程 是 通过 竞争 学 习 完 成 的 。 竞 争 学 习 是 指 同一 层 神经 元 之 间 互 相 竞 
争 ， 竞 争 胜利 的 神经 元 修改 与 其 相 联 的 连接 权 值 的 过 程 。 竞 争 学 习 是 一 种 无 监督 学 习 方 
法 ， 在 学 习 过 程 中 ， 只 需 向 网 络 提供 一 些 学 习 样本 ， 而 无 需 提供 理想 的 目标 输出 。 网 络 根 
据 输 入 样本 的 特性 进行 自 组织 映 射 ， 从 而 对 样本 进行 自动 排序 和 分 类 。 

自 组 织 网 络 在 样本 排序 、 样 本 检测 和 样本 分 类 方面 有 着 广泛 的 应 用 。MATLAB 6x 社 
经 网 络 工具 箱 中 提供 了 竞争 学 习 网 络 、 自 组 织 皮 射 网 络 以 及 学 习 矢量 量化 网 络 ， 它 们 都 主 
要 应 用 于 分 类 方面 ， 可 分 别 用 函数 newc 、newsom 和 newlvq 进行 设计 。 
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2.6.1 竞争 学 习 网 络 


1， 竞 争 学 习 网 络 的 结构 

竞争 学 习 网 络 的 结构 如 图 2.26 所 示 ， 该 网 络 具有 尺 维 输入 和 8 个 输出 ， 由 隐 层 和 竞 
争 层 组 成 。 图 中 的 | adis 模 块 表示 对 输入 失 量 和 神经 元 权 值 矢量 w 之 间 的 距离 取 负 。 
该 网 络 的 输出 层 是 竞争 层 ， 图 中 的 模块 C 表示 竞争 传递 六 数 ， 其 输出 矢量 由 竞争 层 各 神经 
元 的 输出 组 成 ， 除 在 竞争 中 获胜 的 神经 元 外 ， 其 余 神经 元 的 输出 都 为 零 。 竞 争 传递 函数 输 
入 矢量 闫 中 的 最 大 元 素 所 对 应 的 神经 无 是 交 争 中 的 获胜 者 ， 其 输 山 固定 为 1。 


输入 输出 层 (竞争 层 ) 








其 中 
二 到 | ”Re 输入 矢量 的 数 
3: 输出 层 神经 元 的 个 孝 








UL _ J) 上 J 
用 一 一 人 Wi 一 从 十 本 4 一 compettm) 


图 2.26 竞争 学 习 网 络 结构 图 


2 竞争 学 习 网 络 的 建立 
函数 newc 可 用 米 娃 立 一 个 党 争 学 习 网 络 。 函 数 调用 形式 为 
net=newc(PR ,S,KLR ,CLR) 

其 中 ，PR 为 R 维 输入 矢量 中 每 个 元 素 可 取 的 最 小 值 和 最 大 值 所 构成 的 尺 X2 维 第 阵 ， 8 为 
神经 元 个 数 ， 也 是 类 别 个 数 ，KLR 表示 Kohonen 学 习 速 衬 ， 其 缺 省 值 为 0.01; CLR 为 
阔 值 学 习 速 率 ， 其 缺 省 值 为 0.001;， 函数 newc 生成 的 竞争 学 习 网 络 经 过 训练 后 才能 
使 用 。 

3. 竞争 学 习 网 络 的 训练 

竞争 学 习 网 络 依据 Kohonen 学 习 规则 和 效 值 学 习 规 则 进行 训练 。 

竞争 学 习 网 络 每 进行 一 步 学 习 ， 权 值 矢量 与 当前 输入 矢量 最 为 接近 的 神经 元 将 在 竞争 
中 取胜 ， 网 络 则 依据 Kohonen 学 习 规 则 对 这 个 神经 元 的 权 值 进行 调整 。 假 定 竞 争 层 中 的 
第 让 个 神经 元 获胜 ， 其 权 值 矢量 wi 将 修改 为 

mi(g)=Wwi(g-D+CCP9) 一 witg 一 ])) 

按照 上 述 规则 ， 修 改 后 的 获胜 神经 元 权 值 矢量 将 更 接近 于 当前 的 输入 。 经 过 这 样 的 调 : 
整 后 ， 当 下 一 次 网 络 输入 类 似 的 矢量 时 ， 这 一 神经 元 就 豚 有 可 能 在 竞争 中 取胜 ， 若 输入 的 
冬 量 与 该 神经 元 的 权 值 矢量 相差 很 大 时 ， 则 该 神经 元 极 有 可 能 落 败 。 随 着 训练 的 进行 ， 网 ; 
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络 中 的 每 一 个 神经 元 将 代表 一 类 近似 的 矢量 ， 当 接受 某 类 矢量 输入 时 ， 对 应 类 别 的 神经 元 
将 在 竞争 中 获胜 ， 从 页 网 络 就 具有 了 分 类 的 鳃 能 。Kohonen 学 习 规则 对 应 的 工具 箱 攻 数 为 
learnk 。 
如 果 竞 争 学 习 网 络 中 某 “神经 元 的 初始 权 值 被 设置 得 远离 所 有 训练 样本 矢量 ， 那 么 这 
一 神经 元 在 训练 过 程 中 将 没有 机 会 取胜 ， 其 权 值 将 一 直 得 不 到 调整 ， 在 训练 结束 后 依然 不 
能 表示 某 类 数据 特性 ， 这 样 的 神经 元 在 网 络 中 是 无 用 的 。 为 避免 这 种 情况 的 发 生 ， 在 训练 
中 可 以 有 意 地 改变 各 神经 元 的 闪 值 ， 使 得 经 常 取胜 的 神经 元 的 阔 值 变 小 ， 不 常 取胜 的 神经 
元 的 病 值 变 大 ， 从 而 使 各 神经 元 获胜 的 机 会 均等 。 工 具 箱 函数 learncon 可 用 来 执行 这 种 
阅 值 学 习 规 则 。 乔 要 注意 的 是 ， 阅 值 学习 速 率 的 设置 应 小 于 Kohonen 学 习 速率 。 
在 建立 竞争 学 习 网 络 时 ， 只 上 要 训 练 函 数 设置 正确 ， 网 络 在 训练 过 程 中 将 白 动 采用 .上 述 
学 习 规 则 。 假 设 神经 网 络 对 象 的 名 称 为 net， 只 要 net 的 训练 函数 设 为 rainr 函数 ， 即 
nettrainFcn = 'trainr 
那么 在 调用 训练 函数 train 时 ， 网 络 将 自动 按照 上 述 规则 进行 训练 ， 即 
pet = train ( net , 卫 ) 


其 中 ，P 为 网 络 的 输入 矢量 矩阵 。 
2.6.2” 自 组 织 特 征 映 射 网 络 


自 组 织 特征 暑 射 网 络 (SOFM) 的 梅 造 是 基于 对 人 类 咬 皮 层 功 能 的 模仿 。 在 人 脑 的 及 
皮层 中 ， 对 外 界 信号 刺激 的 感知 和 处 理 是 分 区 进行 的 ， 因 此 自 组 织 特征 冉 射 网 络 不 仅 归 对 
不 同 输入 信号 产生 不 同 的 响应 ， 即 与 竞争 学 习 网 络 一 样 具 有 分 类 的 功能 ， 更 重要 的 是 要 实 
现 功 能 相同 的 神经 元 在 空间 分 布 上 的 聚集 。 因此 自 组 织 映 射 网 络 在 训练 时 除了 要 对 获胜 神 
经 元 的 权 人 进行 调整 外 ， 还 要 对 获胜 神经 元 邻 域内 的 所 有 神经 元 进行 权 值 修正 ， 从 而 使 邻 
近 的 神经 元 具有 相同 的 功能 。 

1， 自 组 织 特征 映射 网 络 的 结构 

自 组 织 特征 映射 网 络 的 结构 如 图 2.27 所 示 ， 其 结构 与 竞争 学 习 网 络 完全 相同 ， 但 自 
组 织 映 射 网 络 在 训练 时 要 对 获胜 神经 元 邻 域内 的 所 有 神经 元 进行 权 值 的 修正 。 












































输入 自 组 织 肌 射 层 





其 中 ， 
R 输入 矢量 的 维 歼 
5+ 输出 蝴 神 经 元 的 个 数 
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图 2.27 自 组 织 特征 映射 网 络 结构 图 
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2 输出 层 神经 元 的 拓扑 结构 和 距离 计算 
昌 组 织 特征 映射 网 络 输出 层 的 神经 元 可 以 按 任意 维 形 式 排列 ， 工 具 箱 函数 gridtop、 
hextop 和 randtop 可 用 来 建立 输出 层 宰 经 元 在 物理 位 置 上 的 拭 扑 结构 ， 它 个 分 别 把 神经 元 
设置 在 长 方形 、 六 角形 或 任意 形状 的 网 格 上 ， 这 三 全 函数 的 调用 形式 分 别 为 
pos = gridtop ( diml, dim2,，… ,dimN ) 
pos =hextop ( diml, dim2，… ,dimN ) 
pos = andtop (diml, dim2 ，… ,dimN ) 
其 中 ，diml，dim2，…，dimN 是 以 N 维 形式 排列 的 输出 层 神经 元 在 各 维 的 个 数 ， 函 数 返 
回 值 pos 是 一 个 WXS 维 矩 阵 ， 其 中 3 等 于 dim1、dim2、… 、dimN 的 乘积 ， 是 输出 层 
神经 元 的 总 个 数 ， 抢 阵 pos 中 的 每 一 列表 示 一 个 神经 元 在 N 维 空间 中 的 坐标 。 通 数 
plotsom 可 以 用 来 描绘 输出 层 神经 元 的 拓扑 图 ， 其 调用 形式 如 下 : 
plctsom (pos ) 
图 2.28 给 出 了 这 三 种 拓扑 结构 的 示意 图 。 






































长 方形 网 络 六 角形 网 络 任意 形状 网 络 
网 2.28 ”输出 层 神 经 元 托 扑 结构 示意 峡 
工具 箱 函 数 dist、boxdist、linkdist 或 mandist 可 用 来 计算 自 组 织 特征 映射 网 络 输 出 
层 神经 元 之 问 的 距离 。 这 些 函 数 的 调用 形式 如 下 : 
D=dist(pos) 
了 =boxdist ( pos ) 
D =1linkdist{pos ) 
D = mandist (pos ) 
其 中 ，pos 表示 神经 元 位 置 的 NX8 维 上 矩阵， 矩阵 的 每 一 列 对 应 一 个 神经 元 的 位 置 任 标 : 返 
同 值 D 为 8SXS 维 矩阵 ， 矩 阵 中 的 每 一 个 元 素 D(i， 乃 表示 第 夺 个 和 第 个 神经 元 之 间 的 
距离 。 这 由 种 距离 函数 采用 的 计算 方法 如 表 2.4 所 示 。 表 中 利用 MATLAB 语句 表示 各 距 
离 函 数 的 计算 方法 ， 并 且 假 定 第 计 个 和 第 /个 神经 元 的 位 置 坐标 矢量 分 别 为 和 了 两 神 
经 苑 之 间 的 距离 为 Di 。 
在 设 定 了 网 络 拓 朴 结构 和 距离 函数 之 后 ， 可 以 确定 神经 元 的 邻 域 。 图 2.29 为 某 一 神 
经 元 的 邻 域 示意 图 ， 图 中 的 输出 层 神经 元 拓扑 结构 由 gridtop 函数 生成 ， 假定 位 于 中 心 的 
神经 刀 为 竞争 获胜 神经 元 ， 当 采用 不 同 的 距离 着 数 时 ， 该 神经 元 的 邻 域 形状 不 同 ， 其 中 左 
图 采用 的 距离 函数 为 boxdist ， 右 图 采用 的 距离 函数 为 inkdist。 
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表 2.4 距离 函数 及 计算 方法 














距离 函 数 距离 计算 方法 
dist Dij=sum((P-Pi)A23》.^05 
bexdist Dij=max{absKRi -Bi)) 
Dij=0 如果 i=- 


Dij=1 如 果 ((sum((Bi-Pi).^2)).^05) 矢 1 
Di=2 如果 存在 k， 使 Dik=Dxj=1 成 立 








人 Dj=3 。 如 果 存 在 、ko， 使 Dki= Date= Dki= 1 成 立 
Diij=M 如 果 存 在 ki 、k、… 、kw， 使 Dik =Dk = … =Dkj=1 成 立 
Dii=S 其 他 

Pandist Di=sum(abs(Pi-Pi)) 











半径 为 2 的 邻 域 
半径 为 1 的 邻 域 一 






获胜 神经 元 一 





boxdist linkdist 
贸 2.29 神经 元 邻 域 示意 图 
3， 自 组 织 特征 映射 网 络 的 建立 
函数 newsom 可 用 来 建立 一 个 白 组 织 特征 映射 网 络 ， 其 调用 形式 为 
net = newsom (PR ,D ,TECN ,DECN ,OLR , OSTEPS ,TLR ,TIND) 
其 中 ，PR 为 丸 维 输入 矢量 中 每 维 输入 可 取 的 最 小 值 和 最 大 值 所 构成 的 RX2 维 矩 阵 ;D 为 
输出 层 神 经 元 在 多 维 空间 中 排列 时 各 维 的 个 数 ， 缺 省 值 为 [5 8]， TECN 用 于 设 定 拓扑 函 
数 ， 缺 省 值 为 hbextop';， DEFCN 用 于 设 定 距 离 函数 ， 缺 省 值 为 inkdist，QLR 用 于 排列 阶段 
学 习 速 率 ， 缺 省 值 为 09，OSTEPS 用 于 排列 阶段 学 习 次 数 ， 缺 省 值 为 1000， TLR 用 于 调 
整 阶段 学 习 速率 ， 缺 省 值 为 002;，TND 用 于 调整 阶段 邻 域 半径 ， 缺 省 值 为 1。 
4， 自 组 织 特征 映射 网 络 的 训练 2 
自 组 织 特 往 映 射 网 络 的 训练 过 程 分 排列 和 调整 酚 个 阶段 进行 。 在 网 络 的 训练 过 程 q 
假定 当前 输入 下 第 i 个 神经 元 获胜 ， 孝 么 网 络 中 神经 元 权 值 的 修正 将 依照 下 式 进 行 
W,(g)=wW Cg-D+CLP(9) 一 W: (9 一 ID 
mi(g=w(9-D+05c( DO-w(a-D 7e Nd) 


中 ，Ne(O 表示 款 胜 神经 元 的 邻 域 ， 即 
NOD= han < 作 
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从 上 述 公式 中 可 以 看 出 ， 获 胜 神经 元 权 值 的 修正 量 与 学 习 速 率 成 正比 ， 邻 域内 神经 元 
权 值 的 修正 量 与 学 习 速率 的 一 半 成 正 比 ， 而 邻 域外 的 神经 元 权 值 不 作 修正 。 在 排列 和 调整 
这 两 个 阶段 的 训练 中 ， 学 习 速率 和 邻 域 半径 的 设 定 有 所 不 同 。 

在 排列 阶段 中 ， 邻 域 半 径 首 先 设 定 为 两 全 神经 元 的 最 大 可 能 距离 ， 然 后 在 训练 过 程 中 
逐渐 减 小 到 指定 的 调整 阶段 邻 域 半径 ， 而 学 习 速 率 首 先 采用 排列 阶段 学 习 速率 ， 然 后 在 训 
练 过 程 中 逐步 降低 到 调整 阶段 学 习 速 率 。 在 这 一 阶段 中 ， 网 络 中 的 神经 元 按照 输入 数据 的 
分 布 进行 排列 ， 从 而 实现 了 功能 相同 的 神经 元 在 输入 空间 分 布 上 的 聚集 。 排 列 阶 段 的 学 习 
次 数 在 网 络 建立 时 出 设计 者 指定 。 

在 调整 阶段 中 ， 邻 域 半 径 一 直 保持 为 指定 的 调整 阶段 邻 域 壮 径 ， 一 般 取 值 较 小， 典 
型 值 为 1.0， 学 习 速 率 则 从 调整 阶段 学 习 速率 开始 缓慢 降低 。 小 邻 域 半径 和 缓慢 下 降 的 学 
习 速 率 可 以 对 网 络 进行 良好 的 调整 ， 同 时 又 不 破坏 排列 阶段 神经 元 已 形成 的 分 布 。 由 于 调 
整 过 程 非常 缓 蝎 ， 因 此 调整 阶段 的 学 习 次 数 要 远大 于 排列 阶段 的 学 习 次 数 。 

上 上述 学 习 规则 可 由 工具 箱 函 数 learmsom 实现 。 当 网 络 的 训练 函数 设置 为 trainr' 或 自 适 
应 函数 设置 为 trains 时 ， 即 

mettrainFcn = 'trainr ， 或 hetadaptFcn = 'trains ， 
那么 在 调用 训练 函数 train 时 ， 网 络 将 按 上 述 学习 规 则 进行 训练 ， 即 
net = trainf net ,P) 


其 中 ，P 为 网 络 的 输入 矢量 斤 阵 。 
2.6.3 ”学习 矢 量 量化 网 络 


1 学 习 夭 量 量化 网 络 的 结构 

学 习 矢 量 量化 网 络 出 一 个 竞争 层 和 一 个 线性 层 组 成 ， 结 构 如 图 2.30 所 示 。 在 该 网 络 
中 ， 竞 争 层 的 作用 仍 是 分 类 ， 但 它 首 先 将 输入 矢量 划分 为 较 精细 的 子 类 别 ， 然 后 线性 放 将 
竞争 层 的 分 类 结果 进行 合并 ， 从 而 形成 符合 用 户 定义 的 目标 分 类 模式 ， 因 此 线性 层 的 神经 
元 个 数 时 要 比 竞争 层 的 神经 元 个 数 8 少 。 

























































































输入 竞争 层 线 竹 层 
了 1 一 下 
[mw _。 其中 
1 提 | | 2 和 的 全 
本 吕 经 元 
RET 5X 训 | XI SI 于 全 居 村 公款 的 个 到 
可 X 弄 
及 豆 更 
人 人 了 人 了 





机 一 一 人 lwl 一 于 一 competnD 到 一 Pureline(Wi0) 


图 2.30 ”学习 矢量 痢 化 网 络 结构 图 
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2.， 学 习 矢 量 量化 网 络 的 建立 
学 习 矢 量 量化 网 络 可 以 由 晒 数 newlvq 建立 ， 该 咕 数 的 调用 形式 为 
bet = newijvq(PR ,S1, PC,LR,LE) 

其 中 ，PR 为 尽 维 输入 矢量 中 每 维 输入 可 取 的 最 小 值 和 最 大 值 所 构成 的 尺 X2 维 矩 阵 ; S1 
为 竞争 层 神经 元 的 个 数 ，PC 是 一 个 兄 维 矢量 ，&S 为 数据 类 列 个 数 ，PC 中 的 每 一 个 元 素 分 
别 表 示 对 应 类 别 的 输入 样 木 矢量 个 数 占 输入 样本 失 量 总 数 的 百分比 ; LR 为 学 习 速率 ， 缺 
省 值 为 001，LF 为 学 习 函 数 ， 可 以 是 dearnlvl' 或 earnlv2,， 缺 省 值 为 learnlvl1'。 

3， 学 习 夭 量 量化 网 络 的 训练 

学 习 矢 量 量化 网 络 在 建立 时 ， 竞 争 层 和 线性 层 之 间 的 连接 权 值 矩阵 瑟 " 就 已 经 确定 
了 ， 如 果 与 竞争 层 基 一 神经 元 对 应 的 矢量 子 类别 属 于 线性 层 某 个 神经 元 所 对 应 的 日 标 类 
别 ， 则 这 两 个 神经 元 的 连接 权 值 为 1 ， 和 否则 二 者 的 连接 权 值 为 0 ， 这 样 的 权 值 矩阵 就 实 
了 现 了 子 类 别 到 目标 类 别 的 合并 。 根 据 上 述 办 法 ， 了 的 每 一 列 中 除了 一 个 元 素 为 ! 之 外 ， 
其 余 元 素 均 为 0，1 在 该 列 中 的 位 置 表 明了 竞争 层 所 确定 的 子 类 别 属于 哪 种 目标 类 别 。 在 
建立 网 络 时 ， 每 类 数据 占 数 据 总 数 的 百分比 是 已 知 的 ， 这 也 是 竞争 慨 神 经 苑 归并 到 线性 居 
各 个 输出 时 所 依据 的 比例 。 由 于 WP 是 事先 确定 的 ， 所 以 在 网 络 训练 时 只 需要 调整 竞争 层 
的 权 值 垂 阵 ! ， 同 时 ， 训 练 结果 不 色 要 保证 竞争 层 实 现 正确 的 分 类 ， 还 要 保证 竞争 层 神 
经 元 的 排列 顺序 与 线性 层 神经 元 的 权 值 矩阵 正确 对 应 。 

在 网 络 的 训练 过 程 中 ， 假 定 当前 输入 上 的 第 六 个 神经 元 获胜 ， 孝 么 网 络 中 神经 元 权 值 
的 修正 将 依照 下 式 进行 


wi(0D=wi-D+oaB()-my(9-D) 若 分 类 正确 














WiCg=wi-D 一 co) 一 Wi 一 D) 若 分 类 错误 


上 式 表 明 ， 当 分 类 正确 时 ， 竞 争 层 划 分 的 子 类 别 被 正确 归并 到 日 标 类 别 中 ， 于 是 获胜 
神经 元 权 值 将 被 调整 得 更 加 逼近 输入 矢量 ， 当 分 类 错误 时 ， 竞 争 层 划分 的 子 类 别 未 被 正确 
归并 ， 即 获胜 神经 元 的 位 置 与 线性 层 神经 元 权 值 生 阵 没有 正确 对 应 ， 于 是 获胜 神经 元 权 值 
在 调整 后 将 远离 输入 矢量 。 上 述 的 学 习 算法 被 称 作 LVQL 学 习 规 则 ， 工 具 箱 函数 leamlv1 
实现 的 正 是 这 一 规则 。 

在 应 用 LVQL1 学 习 规 则 对 网 络 进行 训练 后 ， 假 定 某 一 输入 矢量 落 入 到 贞 售 竞争 层 神经 
元 权 值 矢量 的 区 域 中 间 ， 而 且 这 两 个 权 值 矢量 中 的 一 个 将 带 来 正确 分 类 ， 另 一 个 将 会 导致 
错误 分 类 ， 了 于 足 这 个 输入 矢量 被 错 分 的 可 能 性 会 较 大 。 为 避免 这 种 情况 的 发 生 ， 可 以 采用 
Lva2 学 习 规则 进一步 对 网 络 进行 训练 。 在 LVQ2 学 习 规则 中 ， 假 定 当前 输入 矢量 位 于 
竞争 层 神经 元 六 和 产 的 权 值 矢量 的 中 间 区 域 ， 即 


(dd 
Inaib| 一 一 ， 六 
四 


;其 中 3 三 一 -一 
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上 式 中 的 is 和 路 分 别 表 示 输 入 拓 基 到 两 个 权 值 矢量 间 的 欧式 距离 ，w 的 值 通常 了 
在 0.2 和 0.3 之 间 ， 同 时 神经 元 六 获胜 将 导致 错 分 ， 神 经 元 产 获胜 将 带 来 正确 分 类 。 在 
上 述 条 件 同时 满足 的 情况 卜 ， 神 经 元 极 值 将 作 如 下 修正 : 





(DO =wP(9-D 一 CCP(O) 一 mr (9 一 切 


we (@)= T CC-D+a(P(g) 一 We 人-J) 


上 述 学 习 规则 可 以 使 阿 络 的 稳定 性 增强 ， 从 而 减少 了 输入 从 量 被 错 分 的 可 能 。 工 具 箱 
函数 learmlvy2 用 于 实现 这 一 学 习 规 则 。 

存 建立 学 习 撩 量 量 化 网 络 时 ， 如 果 指 定 的 学 习 函 数 为 learmlv2， 那 么 在 网 络 训练 时 将 
先 使 用 本 数 learnlvl 对 网 络 进行 训练 ， 然 后 再 使 用 基于 LVQ2 学 习 规 则 的 Leamlv2 琐 数 对 
网 络 进行 进一步 的 训练 。 

















27 反馈 网 络 


前 面 几 节 介绍 的 网 络 都 属 十 前 交 网 络 ， 这 - 节 将 介绍 神经 网 络 的 另 一 个 重要 类 型 一 
反馈 网 络 。 在 反馈 网 络 中 ， 信 息 存 前 向 传递 的 同时 还 要 进行 反 向 传递 ， 这 种 信息 的 反馈 可 
以 发 生 在 不 同 网 络 层 神经 元 之 间 ， 也 可 以 只 限于 某 一 层 神经 元 上 。 由 十 反馈 网 络 是 动态 网 
络 ， 因 此 只 有 满足 了 稳定 性 条 件 ， 网 络 才能 在 工作 一 段 时 间 后 达到 稳定 状态 。 

MATLAB 6.x 神经 网 络 工具 箱 中 提供 的 反馈 网 络 包 括 Elman 网 络 和 Hopfield 网 络 ， 
它们 可 分 别 用 函数 newelm 和 newhop 建立 ， 其 中 :Elman 网 络 主要 用 和 守信 号 检测 和 预测 
等 方面 ，Hopfield 网 络 主要 用 于 联想 记 亿 、 聚 类 和 优化 计算 等 方面 。 


2.7.1 Elman 网 络 














1，Elman 网 络 的 结构 

Elman 网 络 由 若干 个 隐 层 和 输出 层 构 成 ， 并 且 在 隐 层 存在 反馈 环节 ， 其 结构 如 图 2.31 
所 示 。 图 中 ， 横 块 驴 表示 时 延 环节 ， 隐 层 神经 元 采用 tansig 函数 作为 传递 琐 数 ， 输出 层 
传递 函数 为 纯 线 性 函数 purelin ， 这 两 层 神经 元 的 传递 秒 数 可 以 在 建立 网 络 时 由 用 户 自己 
指定 。 当 隐 层 神经 元 足够 多 时 ，Elman 网 络 的 这 种 结构 可 以 保证 网 络 以 任意 精度 吉 近 任意 
的 非 线性 函数 。 

2，Elman 网 络 的 建立 

Elman 网 络 可 以 由 工具 箱 函 数 newelm 建立 ， 该 函数 的 调用 形式 为 

net = newelm (PR ,[S1S2 … SN],{TFITF2 … TFN }, BTF,BLF ,PEF) 1 

其 中 ，PR 为 及 维 输入 矢量 中 每 维 输入 可 取 的 最 小 值 和 最 大 值 所 构成 的 RX2 维 甜 阵 ; S1 
到 SN 分 别 表示 各 层 神经 元 的 个 数 ，TEF1 到 TEN 为 各 层 神经 元 的 传递 函数 ，BTF 为 网 络 的 
训 红 嚼 数 ， 缺 省 全 为 traingdx'，BLF 是 学 习 规 则 函 数 ， 缺 省 值 为 leamgdm';，PF 是 网 络 性 能 : 


: 
4 
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指标 函数 ， 缺 省 值 为 mse'。 

Eliman 网 络 的 初始 化 函数 在 网 络 生成 时 设 定 为 initpw， 即 Nguyen-Widrow 初始 化 规 
则 。 网 络 在 训练 时 采用 基于 误差 反 向 传播 算法 的 学 习 函 数 ， 如 trainim、trainbfg、trainrp、 
traingd 等 。 


GIKk 一 中 


其 中 
R， 输 入 矢量 的 维 表 

3t， 几 层 神经 元 的 个 数 
;线性 层 神经 元 的 个 数 








输入 陷 层 (反馈 层 ) 输出 层 (线性 层 ) 
全 的 一 ansig( 钱 旭 十 Yel 人 一 D) 二 8。 到 用 一 parelin(W2a 昌 十 的 


图 2.31 Elman 网 络 结构 图 


2.7.2 ”Hopfield 网 络 


Hopfield 网 络 主要 用 于 联想 记忆 和 优化 计算 等 问题 。 联 想 记忆 是 指 当 网 络 输入 某 个 矢 
量 后 ， 网 络 经 过 反馈 演化 ， 从 网 络 输出 端 得 到 另 一 个 矢量 ， 这 样 输出 矢量 称 作 网 络 从 初始 
输入 矢量 联想 得 到 的 一 个 稳定 记忆 ， 即 网 络 的 一 个 平衡 点 。 优 化 计算 是 指 当 某 一 问题 存在 
多 种 解法 时 ， 可 以 设计 一 个 目标 函数 ， 然 后 寻求 满足 这 一 日 标 函 数 的 最 优 解法 。 例 如 ， 在 
很 多 情况 下 可 以 把 能 量 函 数 作为 目标 函数 ， 得 到 的 最 优 解法 需要 使 能 量 函数 达到 极 小 点 ， 
即 能 量 函 数 的 稳定 平衡 点 。 总 之 ，Hopfield 网 络 的 设计 思想 就 是 在 初始 输入 下 ， 使 网 络 经 
过 反馈 计算 最 后 达到 稳定 状态 ， 这 时 的 输出 即 是 用 户 需 要 的 平衡 点 。 

1，、Hopfield 网 络 的 结构 

单 层 Hopfield 网 络 的 结构 如 图 2.32 所 示 ， 其 神经 元 传递 函数 为 对 称 饱和 线性 函数 














其 中 : 
R， 输入 矢量 的 维 数 
3: 神经 元 的 个 数 








alt) 一 P al 一 satline(Wrat 人 一 D 十 5 


图 2.32 Hopfield 网 络 结构 图 
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satlins。 网 络 的 输入 作为 初始 值 首 先 输入 到 各 神经 元 ， 经 过 反馈 计算 ， 网 络 最 终 稳定 在 某 
一 状态 ， 并 输出 这 一 稳定 值 。 
2，Hopfield 网 络 的 设计 
newhop 因数 可 用 来 设计 Hopfieid 网 络 ， 该 函数 的 调用 方式 为 
met = newhop(T) 
其 中 ，T 为 日 标 矢量 ， 也 就 是 用 户 希 望 网 络 所 能 达到 的 平衡 点 。 需 要 注意 的 毗 ，pnewhop 
函数 可 能 会 导 丝 虚 假 平衡 点 的 出 现 。 
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四 


在 MATLAB 神经 网 络 工具 箱 中 ， 神 经 网 络 对 象 赴 一 个 非常 重要 的 概念 。 工 具 箱 的 设 
计 者 们 在 神经 网 络 对 象 中 封装 了 网 络 结构 、 网 络 权 值 和 闪 值 以 及 训练 男 数 等 所 有 重要 的 网 
络 属性 ， 汉 用 户 建立 一 个 神经 网 络 对 象 后 ， 只 要 设置 好 网 络 属性 ， 就 可 以 方便 地 使 网 络 按 
照 自 己 的 期 望 进行 训练 和 工作 ， 而 不 必 再 编写 兄长 的 程序 语句 ， 从 而 大 大 提高 了 神经 网 络 
系统 的 设计 与 分 析 效 率 。 

在 MATLAB 中 ， 用 户 不 仅 可 以 利用 工具 箱 函 数 进行 编 程 来 实现 神经 网 络 的 设计 和 分 
析 ， 还 可 以 利用 图 形 用 户 办 面 GUI 和 动态 可 视 化 仿 上 工 具 Simulink 方便 直观 地 对 神经 网 
络 进行 设计 和 分 析 ， 这 两 种 方法 的 本 质 虽然 仍 是 基于 神经 网 络 对 象 和 工具 箱 函数 ， 但 却 省 
略 了 编程 过 程 。 本 章 将 首先 介绍 神经 网 络 对 象 的 结构 和 属性 ， 然 后 对 神经 网 络 工具 箱 北 数 
进行 说 明 ， 最 后 介绍 如 何 利用 图 形 用 户 界面 GUI 和 Simulink 工具 对 神经 网 络 进行 设计 和 
分 析 。、 
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3.1 神经 网 络 对 象 


一 个 神经 网 络 对 象 定义 和 存储 了 网 络 总 体 结构 、 子 对 象 结 构 〈 网 络 细节 结构 )、 通 
数 、 函 数 参数 、 权 值 和 阔 值 、 其 他 数据 共 六 部 分 的 网 络 属性 参数 ， 本 节 将 介绍 这 些 属 性 参 
数 的 具体 含义 。 下 文中 均 假 定神 经 网 络 对 象 的 名 称 为 net。 


3.1.1 神经 网 络 对 象 的 属性 


1， 网 络 总 体 结构 

网 络 总 体 结构 包括 以 下 属性 : 

CD _ numtnputs， 该 属性 定义 了 神经 网 络 的 输入 个 数 ， 属 性 信 可 以 是 0 或 二 整数 。 需 要 
注意 的 图 ， 该 属性 定义 了 网 络 输 入 矢量 的 总 个 数 ， 而 不 是 单个 输入 失 量 的 维 数 

(2]) numLayers;， 该 属性 定义 了 神经 网 络 的 层 数 ， 其 属性 值 可 以 是 0 或 正 整 数 。 

G) biasComnect: 该 属性 定义 了 神经 网 络 的 每 层 是 合 具 有 疯 值 ， 其 属性 值 为 YX1 维 的 
布尔 量 和 矩阵 ， 其 中 N 为 网 络 的 层 数 (netnumLayers)。netbiasConnect(i) 为 1， 表示 第 工 层 上 





;的 神经 元 具有 逆 值 ， 为 0 则 表示 该 层 没有 阔 值 。 
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(4) impputConneet: 该 属性 定义 了 神经 网 络 的 输入 层 ， 其 属性 值 为 YX Ni 维 的 布尔 量 矩 
阵 ， 其 中 六 为 网 络 的 层 数 ，ANi 为 网 络 的 输入 个 数 (netnumInputs)。netinputConnecttij) 为 
1， 表 示 第 『 层 上 上 的 每 个 神经 元 都 葛 搂 收 网 络 的 第 / 个 输入 矢量 ， 为 0 则 表示 不 接收 该 
输入 。 

(5) jayerConnect: 该 属性 定义 了 网 络 各 层 的 连接 铺 疯 ， 其 属性 值 为 WXA 维 的 布尔 量 
逢 阵 ， 其 中 六 为 网 络 的 导数。netlayerConnecttij) 为 1， 表 示 第 守 居 与 第 / 层 上 的 神经 元 相 
连 ， 为 0 则 表示 它们 不 相连 。 

(@ outputConmnect:， 该 属 性 定义 了 神经 网 络 的 输出 计 ， 其 属性 值 为 1X 维 的 布尔 基 拖 
阵 ， 其 中 为 网 络 的 层 数 。netoutputConnect(D 为 1， 表 示 第 ， 层 神经 元 将 产生 网 络 的 条 
出 ， 为 0 则 表示 该 层林 产生 输出 。 

(7) targetConnect， 该 属性 定义 了 神经 网 络 的 目标 层 ， 即 网 络 娜 些 层 的 输出 具有 目标 失 
量 。 其 属性 值 为 1XN 维 的 布尔 量 矩 阵 ， 其 中 N 为 网 络 的 层 数 。nettargetConnectGD) 为 1， 
表示 第 层 神经 元 产生 的 输出 具有 目标 矢量 ， 为 0 则 表示 该 层 输出 不 具有 目标 矢量 。 

(8) numOutputs:， 该 属性 定义 了 神经 网 络 条 出 矢量 的 个 数 ， 属 性 值 为 只 读 变量 ， 其 数 
值 为 网 络 中 输 贞 层 的 总 数 (sumnetoutputConnecb) - 

(9) numTargets， 该 属性 定义 了 网 络 目 标 矢量 的 个 数 ， 属 性 值 为 只 读 变 量 ， 其 数值 为 网 
络 中 目标 尼 的 总 数 (sum(net-targetConnecb)。 

(10) numInputDelays:， 该 属性 定义 了 神经 网 络 的 输入 延迟 ， 属性 值 为 只 读 变 量 ， 其 数 
值 为 网 络 各 输入 层 输 入 延迟 拍 数 (netinputWeights{fijj.delays) 中 的 最 大 值 。 

(10 numLayerDelays:， 该 属性 定义 了 神经 网 络 的 层 输出 延迟 ， 属性 值 为 只 读 变量 ， 其 
数值 为 各 层 的 神经 元 之 问 连接 延迟 拍 数 (netlayerWeights{ij},delays) 中 的 最 大 值 。 

2.， 子 对 象 结构 

子 对 象 结构 包括 以 下 属性 : 

(D inputs;， 该 属性 定义 了 神经 网 络 每 个 输入 的 属性 ， 其 属性 值 为 WX1 维 的 单元 数 
组 ， 其 中 Ni 为 网 络 输入 的 个 数 。 

C) layers: 该 属性 定义 了 神经 网 络 每 层 神经 元 的 属性 ， 其 属性 值 为 WX 1 维 的 单元 数 
组 ， 其 中 尺 为 网 络 的 层 数 。 

(3) outputs， 该 属性 定义 了 神经 网 络 每 个 输出 的 属性 ， 其 属性 值 为 NX1 维 的 单元 数 
组 ， 其 中 灰 为 网 络 的 层 数 。 

(targets， 该 属性 定义 了 每 层 神经 网 络 目标 矢量 的 属性 ， 其 属性 值 为 YX1 维 的 单元 
数组 ， 其 中 N 为 网 络 的 层 数 。 

(5) biases， 该 属性 定义 了 每 层 神经 网 络 阔 值 的 属性 ， 其 属性 值 为 WX 1 维 的 单元 数 
组 ， 其 中 N 为 网 络 的 层 数 。 

(6 inputWeights， 该 属性 定义 了 神经 网 络 每 组 输入 权 值 的 属性 ， 其 属性 值 为 MXANi 维 
的 单元 数组 ， 其 中 为 网 络 的 层 数 ， 上 为 网 络 的 输入 个 数 。 

(CO) layerWeights; 该 属性 包括 了 神经 网 络 各 层 神经 元 之 间 网 络 权 值 的 属性 ， 甚 属性 值 
为 X 维 的 单元 数组 ， 其 中 N 为 网 络 的 层 数 。 
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3 通 数 


神经 网 络 对 象 的 孙 数 包括 以 下 属性 ， 

(D adaptFen， 该 属性 定义 了 网 络 的 白 适 应 调整 函数 ， 其 属性 俏 为 表示 白 适 应 前 数 名 称 
的 字符 串 。 

(2) initFcn， 该 属性 定义 了 网 络 的 初始 化 函数 ， 其 属性 值 为 表示 网 络 初始 化 基数 名 称 
的 字符 串 。 

(G) performFcn， 该 届 社 定义 了 衡量 网 络 输出 误差 的 忻 能 范 数 ， 黄 局 性 值 为 表示 性 能 函 
数 名 称 的 字符 由 。 

(4) trainFcn:， 该 属性 定义 了 网 络 的 议 练 函数 ， 其 属性 值 为 表示 训练 上 数 名 称 的 字 
符 趾 。 

4 函数 参数 

神经 网 络 对 象 的 孙 数 参数 包括 以 下 属性 ; 

(D adaptParam: 该 属性 定义 了 网 络 当前 白 适 应 函数 的 各 参数 ， 其 属性 值 为 各 参数 届 成 
的 结构 体 。 

CO) initParam， 该 属性 定义 了 网 络 当前 初始 化 函数 的 各 参数 ， 其 属性 值 为 各 参数 构成 
的 结构 休 。 

G) performParam， 该 属性 定义 了 网 络 当前 性 能 函数 的 各 参数 ， 其 属性 值 为 各 参数 构 
成 的 结构 体 。 

Ch trainParam。 该 属性 定义 了 网 络 当前 训练 遂 数 的 各 参数 ， 其 属性 值 为 各 参数 构成 的 
结构 体 。 

5.， 权 值 和 冰 值 

神经 网 络 对 象 的 权 值 和 冰 值 包括 以 下 属性 : 

(D ITW: 该 属性 定义 了 网 络 输入 和 各 输入 层 神经 元 之 间 的 网 络 权 值 ， 属 性 值 为 六 X 琶 
维 的 单元 数组 ， 其 中 ，N 为 网 络 的 层 数 ，Ni 为 网 络 的 输入 个 数 。 如 果 netinputConnecttij) 
为 1， 即 第 ;i 层 上 的 各 神经 元 接收 网 络 的 第 /个 输入 ， 那 么 在 单元 netTW{ijj} 中 将 存储 它们 
之 间 的 网 络 权 值 矩阵 ， 该 矩阵 的 行 数 为 第 在 层 神经 元 的 个 数 (netlayersfij-size)， 列 数 为 第 7 
个 输入 的 维 数 neLinputsij}.size) 与 输入 延迟 拍 数 (netinputWeights{ij }.delays) 的 乘积 。 

CELW: 该 属 忻 定义 了 各 层 神经 元 之 间 的 网 络 权 值 ， 其 属性 值 为 WXA 维 的 单元 数 
组 ， 其 中 N 为 网 络 的 层 数 。 如 果 netlayerConnecttij) 为 1， 即 第 站 层 与 第 7 了 层 上 的 神经 元 相 
连 ， 那 么 在 单元 neLLW{ij} 中 将 存储 它们 之 则 的 网 络 权 值 矩阵 ， 该 矩 帮 的 行 数 为 第 展 上 
神经 元 的 个 数 (netayersfij.size)， 列 数 为 第 了 层 神经 元 的 个 数 (netlayers{fj}.size) 与 发 输入 延 
迟 拍 数 (netlayefWeights{ij}.delays) 的 乘积 。 

G) b: 该 属性 定义 了 各 层 神经 元 的 阔 值 ， 其 属性 值 为 1XN 维 的 单元 数组 ， 其 中 忆 为 
网 络 的 层 数 。 如 果 netbiasConnectG) 为 1， 即 第 i 层 的 神经 元 具有 阅 值 ， 那 么 单元 netb{i 
中 将 存储 该 层 的 阅 值 矢量 ， 矢 量 维 数 和 第 i 层 的 神经 元 个 数 (netlayers{jj.size) 相 等 。 

6、 其 他 数据 

userdata 属性 用 于 存储 用 户 信息 。 
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3.1.2 ”神经 网 络 的 细节 结构 〈 子 对 象 属性 ) 


本 节 将 详细 介绍 网 络 输入 、 网 络 层 、 输 由、 目标 、 权 值 和 浆 值 等 子 对 象 的 属 忻 。 

1， 输 入 (inputs) 

网 络 输入 netinputs 为 WiX1 维 的 单元 数组 ， 其 中 netinputs{ 计 中 存储 了 网 络 第 工 个 输 
入 的 信息 。 网 络 的 每 个 输入 具有 以 下 属性 : 

(D size， 该 属性 定义 了 输入 矢量 的 维 数 ， 其 属性 值 可 以 为 0 或 下 整数 。 

(2) range: 该 属性 定义 了 输入 矢量 的 取 值 范围 ， 其 属性 值 为 闫 X2 维 的 矩 笑 ， 尼 ; 为 输 
入 失 量 的 维 数 (netinputs{ij.sizej， 该 矩阵 中 的 每 一 行 表示 输入 矢量 中 各 维 元 素 可 取 的 最 小 
值 和 最 大 值 。 

(3) userdata: 该 属性 用 了 存储 用 户 信息 。 

2 层 Qayers) 

网 络 各 层 netlayers 为 WX1 维 的 单元 数组 ， 共 中 netlayers fj 中 存储 了 网 络 第 层 的 信 
息 。 网 络 的 每 一 层 具有 以 上 属性 : 

(D size， 该 属性 定义 了 每 层 神经 元 的 全 数 ， 其 属性 值 可 以 为 0 或 正 整数 。 

人 dimensions:， 该 属性 定义 了 每 层 神经 元 在 多 维 空间 中 排列 时 各 维 的 维 数 ， 其 属性 值 
为 一 个 行 矢量 ， 该 矢量 中 各 元 素 的 乘积 等 于 该 居 神 经 元 的 个 数 (netlayers{ij.size)。 该 属性 
对 于 自 组 织 映射 网 络 十 分 重要 。 

(9) topologyFcn， 该 属性 定义 了 每 层 神经 元 在 多 维 空间 中 分 布 的 拓扑 函数 ， 其 属性 值 
为 表示 拓扑 函数 名 称 的 字符 冲 。 

(4) positions， 该 属性 定义 了 每 层 网 络 中 各 神经 元 的 位 置 坐标 ， 属 性 值 为 只 读 变 量 ， 其 
值 由 丘 扑 函数 (netlayersfij,topologyFcm 和 神经 元 在 各 维 分 布 的 维 数 (netlayersfij.dimensions) 
来 确定 。 

(5 distanceFcn。 该 属 补 定 义 了 每 层 神经 元 间距 的 计算 函数 ， 其 属性 值 为 表示 距离 函 
数 名 称 的 字符 种 。 

(6) distances:， 该 属性 定义 了 每 居 网 络 中 各 神经 元 之 间 的 距离 ， 属 性 值 为 只 读 变量 ， 其 
数值 由 神经 元 的 位 置 坐标 (netjayers{ij.positions) 和 距离 函数 (nerlayers{ij.distanceFcn) 来 
确定 。 

(7) initFcn。 该 属性 定义 了 每 层 神经 元 的 初始 化 范 数 ， 其 属性 值 为 表示 初始 化 函数 名 
称 的 字符 串 。 

(8) netinputFcn， 该 属性 定义 了 每 层 神经 元 的 输入 函数 ， 其 属性 值 为 表示 输入 函 教 名 
称 的 字符 帅 。 该 函数 确定 了 网 络 每 层 的 加 权 输 入 以 何 种 方式 和 阔 信 组 合 在 一 起 以 形成 神经 
元 传递 函数 的 输入 。 

(9) transferFcn; 该 属性 定义 了 每 层 神经 元 的 传递 函数 ， 其 属性 值 为 表示 传递 函数 名 称 
的 字符 串 。 

《10) userdata: 该 属性 用 于 存储 用 户 信息 。 
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3， 输 出 (outputs) 


网 络 和 输出 netoutputs 为 NX 1 维 的 单元 数组 ， 如 果 第 层 产后 网 络 的 一 个 输出 ， 孝 委 在 
net.outputs{i} 中 将 存储 该 输出 量 的 信息 。 网 络 的 每 一 个 输出 都 具有 以 下 属性 : 
(D size: 该 局 性 定义 了 每 一 个 网 络 输 出 的 维 数 ， 属 性 值 为 上 只 读 变量 ， 其 数值 等 于 该 输 
出 层 中 神经 元 的 个 数 (netlayers{ij.size) 。 
(2) userdata， 该 属性 用 于 人 存储 用 户 信息 。 
4， 目 标 (targets) 
目标 nettargets 为 NX1 维 的 单元 数组 ， 如 果 第 ; 层 具 丰 网 络 的 一 个 目标 矢量 ， 那 么 在 
nettargets 匡 } 中 将 存储 该 日 标 矢量 的 信息 。 网 络 的 每 一 个 日 标 矢量 部 其 有 以 下 属性 : 
(D size:， 该 属性 定义 了 每 一 个 神经 网 络 日 标 矢 量 的 维 数 ， 属 性 值 为 只 读 变量 ， 其 数值 
等 于 第 层 中 神经 元 的 个 数 (netlayers fij.size)。 
(2) userdata: 该 属性 用 十 存储 用 户 信和 总 。 
S， 阅 值 (biases) 、 
阔 值 netbiases 为 YX1 维 的 单元 数组 ， 第 让 个 单元 net-biases 人 中 存储 了 第 让 层 神经 元 
的 疝 值 信息 。 网 络 中 每 一 层 神经 元 的 阔 值 都 具有 以 下 属性 : 
(D initFca， 该 属性 定义 了 阔 值 的 初始 化 基数 ， 其 属性 值 为 表示 阅 什 初始 化 函数 名 称 
的 字符 串 。 
(2) leam:， 该 属性 定义 了 冰 值 在 训练 过 程 中 是 谷 进 行 调整 ， 其 属性 什 为 0 或 1。 
(3) learmFcn， 该 属性 定义 了 阔 值 的 学 习 哆 数 ， 其 属性 值 为 表示 喘 值 学 习 双 数 名 称 的 学 
符 串 。 
(4) learnParam: 该 属性 定义 了 阅 值 学 习 国 数 的 参数 ， 其 属性 值 为 各 参数 构成 的 结 
构 体 。 
(5) size， 该 属性 定义 了 每 民 神 经 网 络 的 阔 值 个 数 ， 属 性 值 为 只 读 变量 ， 共 数 值 等 于 该 
层 神经 元 的 个 数 (net.layersfij.size)。 
(6) userdata， 该 属性 用 于 存储 用 户 仿 。 
6. 输入 权 值 [inputWeights) 
网 络 输入 权 值 netinputWeights 为 NX Ni 维 的 昔 无 数组 ， 其 中 neLinputWeights{ijj 为 网 
络 第 j 个 输入 到 网 络 第 ; 层 的 网 络 权 值 的 属性 。 每 一 组 网 络 输入 权 值 帮 具有 以 下 属性 : 
(D delays: 该 属性 定义 了 网 络 输入 的 各 延迟 拍 数 ， 其 属性 值 是 由 0 或 正 整数 构成 的 行 
朱 量 ， 各 输入 层 实 际 接收 的 是 由 网 络 输 入 的 各 个 延迟 构成 的 混合 输入 。 
C) initFcn， 访 属性 定义 了 输入 权 值 的 初始 化 函数 ， 其 属性 值 为 表示 权 值 初始 化 函数 
名 称 的 字符 奸 。 
G) leam。 该 属性 定义 了 输入 权 值 在 训练 过 程 中 是 否 进行 调整 ， 其 属性 值 为 0 吉 1。 
; (4) leamFcn:， 该 属性 定义 了 输入 权 值 的 学 习 函 数 ， 其 属性 值 为 表示 权 值 学 习 函 数 名 称 
;的 字符 申 。 
(5) learnParam;， 该 属性 定义 了 权 值 学 习 函 数 的 参数 ， 其 属性 值 为 各 参数 构成 的 结 
1 构 体 。 


答 
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9) size: 该 属性 定义 了 每 个 输入 权 值 垂 阵 (neLIW4HijD 的 大 小 ， 其 属性 值 是 一 个 具有 上 曲 
死 素 的 行 矢 量 ， 并 且 是 只 读 变 量 ， 其 中 第 一 个 元 素 等 于 该 居 神 经 元 的 个 数 
(netlayers{ilsize)， 第 二 个 元 素 等 于 输入 延 过 失 量 的 长 度 (lengthtnetinputWeights{ij}.delays)) 
和 输入 矢量 维 数 (neLinputs{fj jsize) 的 乘积 。 

人 7) userdata: 该 属性 用 于 存储 用 户 信 息 。 

《8) weightFcn:， 该 属性 定义 了 输入 权 值 的 加 权 衣 数 ， 其 属性 值 为 表示 加 检 遂 数 名 称 的 
学 符 串 ， 该 函数 确定 了 输入 和 权 值 以 何 种 方式 组 合 在 一 起 构成 神经 元 的 加 权 输 入 量 。 

7. 各 层 网 络 权 值 (layerWeights) 

网 络 各 反 间 的 网 络 权 值 netlayerWeights 为 wxXN 维 的 单元 数组 ， 其 中 
net.layerWeights{fij} 为 从 网 络 第 尺 到 第 守 层 的 网 络 权 值 的 属性 。 网 络 权 值 具 有 以 上 属性 ; 

(D delays: 该 届 性 定义 了 网 络 第 层 的 输出 送 入 到 网 络 第 i 导 之 前 要 经 过 的 各 延迟 拍 
数 ， 其 属性 值 是 由 0 或 正 整数 购 成 的 行 矢量 。 

(2) initFcn:， 该 属性 定义 了 权 值 的 初始 化 函数 ， 其 属性 值 为 表示 权 值 初始 化 攻 数 名 称 
的 字符 冲 。 

G) leam:， 该 属性 定义 了 和 权 值 在 训练 过 程 中 是 否 进 行 调整 ， 共 属性 值 为 0 或 1。 

(4) learmmFcn: 该 属性 定义 了 权 值 的 学 习 冰 数 ， 其 属性 值 为 表示 权 值 学 习 咀 数 各 称 的 字 
符 忠 。 

(5) learnParam: 该 属性 定义 了 权 值 学 习 函 数 的 参数 ， 其 属性 值 为 各 参数 构成 的 结 
构 体 。 

《6) size; 该 属性 定义 了 权 值 矩阵 etLW {ijj) 的 大 小 ， 其 属性 值 是 一 个 具有 了 政 元 素 的 
行 矢量 ， 并 且 为 只 读 变 量 ， 其 中 第 一 个 元 素 等 于 第 ; 层 神经 元 的 个 数 (netlayersfij.size)， 第 
- :个 元 素 等 于 两 层 网 络 之 间 延 迟 矢量 的 长 度 (iengthtnetlayerWeightsfijj.delays) 和 第 7 层 神 
经 元 个 数 (netlayersfjj}.size) 的 乘积 。 

(7) userdata;， 该 属性 用 于 存储 用 户 信息 。 

(8) weightFcn: 该 属性 定义 了 加 权 函 数 ， 其 属性 值 为 表示 加 权 函 数 名 称 的 字符 率 。 
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神经 网 络 对 象 内 待 装 了 初始 化 函数 、 训 练 通 数 等 网 络 属性 ， 在 建立 了 神经 网 络 对 象 之 
后 ， 只 要 正 确 设置 对 象 的 各 个 属性 ， 就 可 以 利用 网 络 的 使 用 函数 完成 对 网 络 的 初始 化 、 训 
练 和 仿真 。 从 神经 网 络 对 象 的 角度 来 说 ，MATLAB 中 神经 网 络 工具 箱 的 结构 可 以 用 表 3-1 
来 加 以 概括 。 本 节 将 根据 该 表 的 内 容 对 网 络 设计 和 分 析 时 常用 的 工具 箱 函数 进行 分 类 介 
绍 。 对 条 作 为 神经 网 络 对 象 属性 参数 的 函数 ， 将 说 明 如 何 把 网 络 对 象 的 属性 设置 为 该 
函数 。 

为 了 方便 读者 在 本 书 中 得 找 工具 箱 函 数 的 功能 和 使 用 方法 ， 本 书 附录 中 列 出 了 本 章 介 让 
绍 的 神经 网 络 常用 工具 条 函数 的 索引 表 。 








AS 
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表 3-1 神经 网 络 工具 箱 函数 的 构成 
网 络 建立 函数 由 定义 网 络 和 各 种 常见 网 络 的 建立 数 








网 络 使 用 表 数 中 的 初始 化 
函数 init 通过 训 用 指定 的 某 
一 种 初始 化 函数 米 完成 对 网 
络 的 初始 化 。 训 练 函数 同 理 


网 络 使 用 函数 初始 化 、 调 整 、 训 练 和 仿真 函数 





网 络 初 给 化 亢 数 
网 络 初始 化 函数 | 层 初 妈 化 本 数 
权 值 和 阅 值 初始 化 函数 
训练 和 自 适 应 调整 函数 
| 学 习 函 数 这 些 函 救 都 是 在 建立 网 络 
性 能 通 数 及 其 导 表 数 对 象 时 需要 设 定 的 参数 ， 在 
线 搜索 函数 程序 中 不 被 直接 调用 ， 而 是 
传递 闲 数 及 其 导 函 数 通过 网 络 使 用 函数 间接 调用 
仿真 函数 加 权 函 数 及 其 导 函 数 
输入 函数 及 其 导 函 数 
自 组 织 网 络 专用 | 拓扑 函数 
丽 数 距离 函数 
教 据 预 处 理 和 后 处 理 函数 
分 析 函 数 
其 他 辅助 丽 数 上 | 绘图 丽 数 
| 网 络 计算 函数 
| 关 量 画 数 

















网 络 学 习 丽 数 
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3.2.1 ”神经 网 络 的 建立 函数 


表 3-2 列 出 了 神经 网 络 的 建立 函数 ， 其 中 netwozk 函数 用 于 建立 由 用 户 自 定义 的 结构 
特殊 的 神经 网 络 ， 这 时 用 户 要 根据 实际 情况 设 定 网 络 的 属性 参数 。 一 般 情况 下 ， 用 户 可 利 
用 newp、newlin 和 new 任 等 网 络 建立 函数 方便 地 创建 各 种 常用 网 络 。 


表 3-2 ”神经 网 络 的 建立 函数 












































函数 名 称 动能- | 
Tetwork 建立 一 个 自 定义 神经 网 络 对 象 
newr 建立 一 个 竞争 层 网 络 
newef 建立 一 个 前 向 级 联 BP 网 络 】 
newelm 建立 一 个 Btman 反馈 网 络 ] 
new 企 建立 - 个 前 向 BP 网 络 
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续 囊 
函数 名 称 功 能 

newfftd 建立 一 个 有 输入 延迟 的 前 疝 BP 网 络 

mewgrnn 设计 一 个 广义 回 妇 网 络 

mewhop 建立 一 个 Bopfield 反馈 网 络 

newlin 建立 一 个 线性 神经 网 络 

newlind 设计 一 个 线性 神经 网 络 

newlvq 建立 一 个 学 习 狼 量 量化 网 络 

mewp 建立 一 个 感知 器 

mewpnn 设计 一 个 概率 神经 网 络 

mew 巾 设计 一 个 径 向 基 函 数 网 络 

mewrbe 精确 设计 一 个 径 向 基 函 数 网 络 

mewsom 建立 一 个 自 组 织 映 射 网 络 
1，、Betwork 
功能 ， 建 立 一 个 自 定义 神经 网 络 对 象 。 


格式 : 

人 D net = network 

图 net = network ( numInputs ，numLayers，biasConnect，inputConnect，ilayerConnect， 
outputConnect，targetConnect ) 

说 明 : 

该 函数 返回 一 个 神经 网 络 对 象 ， 函 数 调用 形式 @ 中 的 numInputs 等 输入 量 可 确定 神经 

网 络 结构 的 参数 ， 其 功能 说 明 可 参见 3.1 节 中 的 介绍 。 
例 3.1 定义 一 个 神经 网 络 对 象 。 


net = network 








met 一 
Neural Network object: 
architecture: 


numImnputs: 0 
aumLayers: 0 
biasCommect: [ 
inputConnect: [] 
layerConnect: [j 
outputConnect: [] 
targetConnect: [] 


nurmOutputs: 0 (read-only) 
numTargets: 0 (read-only) 
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numInputDelays: 0 《read-only) 
numLayerDelays: 0 (read-only) 


Subobject structures: “ 


inputs: {0xl cell) of inputs 
layers: {Oxjl cell) of jayers 
outputs:《【1x0 cell} containing ho outputs 
targets; {Ix0 cell} containing no targets 
biases: {Oxl cell) containing no biases 
inputWeights: {0x0 cellj containing no input weights 
layerWeights: {O0x0 cellj containing no layer weights 


functions: 


adaptFcn: (none) 
initFcn: (none) 
performFcn: (none) 
trainFcn: (none) 


Parameters: 


adaptParam: (none) 
initParam: (none) 
PerformParam: (none) 
trainParam: (none) 
weight and bias values: 
TW: {Ox0 celi) containing no input weight matrices 
LW: {0x0 cell} containing no layer weight matrices 
b: {Oxl cell] containing no bias vectors 


other 
userdata: (user stuffp) 


上 例 在 调用 函数 network 时 没有 给 出 网 络 的 结构 参数 ， 因 此 函数 返回 值 net 中 的 各 属 
性 参数 均 为 冰 数 提供 的 缺 省 值 。 
例 32 建立 一 个 单 输入 二 层 前 向 级 联网 络 ， 网 络 中 每 层 神经 元 都 具有 阔 值 ， 网 络 的 
第 一 层 为 输入 层 ， 第 三 层 为 输出 层 ， 并 且 具 有 目标 矢量 ， 则 其 函数 语 名 格式 如 下 : 
net = network (1, 3,.11 1 1, [1 0;015000100:0 10l,[001,1001]) 
其 网 络 结构 图 如 图 3.1 所 示 ， 图 中 的 IF1 和 TFI1 等 模块 分 别 表示 输入 函数 和 传递 函数 。 
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本 
上 


宙 第 ? 层 第 3 层 
逆 3.1 : 居 前 向 神 经 网 络 结构 疼 











2，mnewc 

功能 :建立 一 个 竞争 层 网 络 。 

格式 

人 net = newc 

人 @@ net = newc (PR, S, KLR, CLR ) 

说 明 : 

竞争 层 网 络 由 单一 的 竞争 居 构 成 ， 主 要 用 十 触 决 分 类 问题 。 竞 争 层 的 加 权 函 数 为 
negdist， 输 入 函数 为 netsum， 和 转 递 函数 为 compet。 神 经 元 权 值 和 阔 值 的 初始 化 冰 数 分 别 为 
midpoint 和 initcon， 网 络 的 白 适 应 调整 函数 和 训练 函数 分 别 为 fains 和 trainr， 权 值 和 效 值 
的 学 习 函 数 分 别 为 learnk 和 leamcon。 

函数 的 调用 形式 上 D 返 辐 一 个 没有 定义 结构 的 空 对 象 ， 并 显示 图 形 用 户 界 面 函 数 nntool 
的 帮助 文字 。 

沾 数 的 调用 形式 @@ 返 回 竞 争 层 网 络 对 象 net， 此 时 函数 的 自 变量 PR 为 表示 网 络 输入 矢 
量 取 值 范 困 的 矩阵 [Pmin Pmax];， S 为 竞争 层 神经 元 个 数 ， 也 是 网 络 输 入 矢量 的 分 类 数 ， 
KLR 为 权 值 学 习 速 率 ， 缺 省 值 为 001;，CLR 为 闪 值 学 习 速 率 ， 缺 省 值 为 0.001。 

例 3.3 观察 调用 形式 返回 的 结果 。 


net = newC 

















To create a neural aetwork using a graphical user interface: 

1 .Use the command "nntool" to open the Neural Network Manager. 
2. Click "New Network" to open the dialog for creating networks. 
You can then import or define data and train your network in the GUT 
of exXport your network to the command line for training. 


Pet = 
[1 
例 3.4 利用 竞争 层 网 络 把 下 列 二 维 失 量 分 为 两 类 。 
P=[01 08 01 09 02 08; 
02 09 01 08 01 08] 
该 二 维 输入 矢量 的 取 值 范围 算 阵 为 
PR=[0 1; 01] 
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_ 若 把 这 些 矢 量 分 为 两 类 ， 新 建 的 竞争 层 应 由 两 个 神经 元 构成 ， 其 网 络 结构 如 图 3.2 





所 示 。 
pet=newc([0 10 1,27 
对 网 络 进行 训练 。 则 语句 调用 格式 为 1 
pet = train ( net, P ); C 
网 络 的 仿真 结 时 为 
YY=sim(nebP) 2 ， 了 
Y= 输入 竞争 层 
人 1 赔 32， 沈 争 屋 神 经 网 络 结构 多 
《1 2 工 
0.3) 1 
(1 4) 1 
(0.5) 1 
(0) 1 


其 中 ，Y 是 一 个 稀 玻 和 矩阵， 其 第 一 行 的 >、4、56 列 元 素 和 第 二 行 的 1、3、5 列 元 素 均 为 1， 即 
P 中 第 2、4、6 个 输入 矢量 为 第 一 类 ， 其 余 三 个 矢量 属于 第 二 类 。 为 了 便于 观察 结果 ， 可 
将 Y 转 化 为 下 标 矢量 形式 ， 即 
Yc=vec2ind(Y) 
Yec= 
2 1 2 1 2 1 
参见 ， sim、init、adapt、train、trains 和 trainr 函数 。 
3 pnewecf 
功能 ， 建立 一 个 前 向 级 联 BP 网 络 。 
格式 : 
CD net = newecf 
@ net=newcf (PR.[S1S2…SN], TFITF2…TFEN}, BTF BLR PF) 
说 明 : 
该 函数 可 以 建立 一 个 N 层 前 向 级 联网 络 。 网 络 各 层 的 加 权 函 数 为 dotprod， 输 入 函数 
为 netsum， 各 层 传递 函数 由 用 户 确 定 。 各 神经 元 权 值 和 阀 值 的 初始 化 函数 为 initmw， 网 络 
的 自 适应 调整 衣 数 为 trains， 并 根据 指定 的 学 习 函 数 对 权 值 和 阔 值 进行 更 新 ， 网 络 的 训练 
泵 数 由 用 户 指定 。 
函 数 调用 形式 @ 参 见 newec 函数 。 函 数 的 调用 形式 四 返回 前 向 级 联网 络 对 象 net ， 此 
时 函数 的 自 变量 PR 为 表示 网 络 输入 矢量 取 值 范围 的 矩阵 [Pmin Pmax]，St~SN 为 各 层 的 
， 神经 元 个 数 ，TFI~TFN 用 于 指定 各 层 神经 元 的 传递 函数 ， 可 以 是 tansig、logsig 或 purelin 
; 等 可 微 传 递 函 数 ， 缺 省 值 为 tansig :BTF 用 于 指定 网 络 的 训练 函数 ， 可 以 是 trainim、 
; tainbfg、trainrp 或 raingd 等 采用 BP 算法 的 训练 函数 ， 缺 省 值 为 rainlm'，BELF 用 于 指定 
; 权 值 和 阅 值 的 学 习 函 数 ， 缺 省 值 为 yeamgdm', 也 可 以 是 基 王 其 他 BP 算法 的 学 习 函 数 ，PF 
4 用 了 于 指定 网 络 的 性 能 函数 ， 可 以 惩 mse、msereg 等 可 微 性 能 函数 ， 缺 省 值 为 mse 


全 
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例 3.5 假设 输入 和 日 标 矢量 年 阵 分 别 为 
P=fBg765432190; 
T=[D 1232123 92; 
建立 一 个 两 层 前 向 级 联网 络 ， 其 中 第 一 层 有 六 个 神经 元 ， 采 用 tansig 传 递 函数 ， 输 出 层 神 经 
元 的 传递 函数 为 purelin， 其 他 参数 均 采 用 缺 省 值 ， 其 网 络 结构 如 图 3.3 所 示 。 
































四 
bf 
1 6 工 
人 上 攻 上 
输入 第 ! 层 第 2 层 


图 33 了 芮 居 级 联 前 癌 神经 网 络 的 结构 闹 
pnet=newcf( [0 8].[6 1 ftansig' purelin ] ) 
对 网 络 进行 训练 和 仿真 : 
net = train (net、P、 了 ); 
Y=sim(net、P) 
训练 和 仿真 结果 为 
= 
-0.0000 1.0000 2.0000 3.0000 2.0000 1.0000 2.0000 30000 2.0000 
参见 : newff、newelm、sim、init、adapt、train 和 trains 函数 。 
4，、newelm 
功能 ;建立 一 个 Elman 反馈 网 络 。 
格式 : 
名 net=newelm 
国 net = newelm (PR,[ S1 S2…SN ],{TFITF2…TFN }, BTR BLE PP) 
说 明 : 
该 函数 可 以 建立 一 个 打 层 Blman 网 络 。 网 络 中 各 层 依次 级 联 ， 除 最 后 一 层 外 网 络 的 每 
层 都 具有 自 反馈 ， 最 后 一 层 为 网 络 的 输 山 层 。 网 络 各 层 的 加 权 函 数 为 dotprod， 和 输入 函数 为 
netsum， 各 层 传递 函数 由 用 户 设 定 。 各 神经 元 权 值 和 阔 值 的 初始 化 函数 为 inimw， 网 络 的 
自 适 应 调整 肯 数 为 trains， 并 根据 指定 的 学 习 函 数 对 权 值 和 陪 值 进行 更 新 ， 网 络 的 训练 函 
数 由 用 户 指定 。 
函数 调用 形式 四 参见 newc 函数 。 函 数 的 调用 形式 @@ 返 回 Blman 网 络 对 象 net， 此 时 函 
数 和 输入 PR 为 表示 网 络 输 入 矢量 取 值 范围 的 扼 阵 TPmin Pmax]; S1 一 SN 为 各 层 神经 元 的 个 。 
数 ，TFI~TEN 用 于 指定 各 层 神经 元 的 传递 函数 ， 缺 省 值 为 tansig'， 也 可 以 设 为 logsig、 
purelin 等 可 微 传 递 函 数 ，BTF 用 于 提 定 训练 函数 ， 缺 省 值 为 traingdx'， 可 以 设 为 trainbfg 
或 traingd 等 采用 BP 算法 的 训练 函数 ， 但 不 宜 使 用 trainlm、trainrp 等 采用 大 学 习 步 长 的 函 ; 


数 ，BLE 用 十 指定 权 值 和 闭 值 的 学 习 函 数 ， 缺 省 值 为 learmgdm'， 也 可 以 设 为 基于 其 他 BP ; 
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算法 的 学 习 函 数 ，PF 用 于 指定 性 能 函数 ， 缺 省 值 为 mse'， 也 可 以 设 为 msereg 等 可 微 性 能 
例 3.6 假设 输入 和 日 标 序列 分 别 为 

Pseq = {0.0, 1 1 0 1.0.0,1}; 

Tseq = {0,. 1 0 1 0,.0.0, 1,.07 
建立 一 个 两 层 Elman BP 网 络 ， 其 中 第 一 层 有 六 个 神经 元 ， 传 递 昂 数 为 tansig， 该 层 具有 自 
反馈 ， 输 出 层 神 经 元 的 传递 函数 为 iegsig， 其 他 参数 均 采 攻 缺 当 值 ， 其 网 络 结构 如 儿 3.4 
所 示 。 

net= newelm(l0 1,16 1],{ftansig logsig'}) 

















输入 第 ! 层 第 2 层 


疼 3.4 帅 层 Biman BP 网 络 结构 峡 
然后 对 网 络 进行 训练 和 仿真 ; 
net.trainParam.epochs=500; 
net = train ( net, Pseq, Tseq 》) 
Y=simfneb Pseq) 
训练 和 仿真 结果 为 
立 = 
[0.0001] [0.9993] {f0.0005] [0.9985] (0.0001] [0.0011] [0.0013] [0.9997] [0.0005] 
参见 : newff、newcf、sim、init、adapt、train 和 trains 上 数 。 
5，mnew 介 
功能 :建立 一 个 前 向 BP 网 络 。 
格式 : 
人 net = new 任 
加 net= new 人 (PR,[S1S2…SN], (TFITF2…TEFN }, BITEBLR PF) 
说 明 : 
该 函数 订 以 建立 一 个 N 层 前 向 BP 网 络 。 网 络 各 层 的 加 权 闵 数 为 dotprod， 输入 数 为 
: netsum， 各 层 传递 天 数 由 用 户 设 定 。 各 神经 元 权 值 和 闭 值 的 初始 化 函数 为 inimw， 网 络 的 
自 适 应 调整 函数 为 tains， 并 根据 指定 的 学 习 函 数 对 权 值 和 阅 值 进行 更 新 ， 网 络 的 训练 函 
; 数 由 用 户 指定 。 


昌 
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阴 数 调用 形式 @ 参 见 newc 函数 。 肯 数 的 调用 形式 @ 返 回 BP 网 络 对 象 net， 此 时 函数 
的 自 变 量 PR 为 表示 网 络 输入 矢量 取 值 范围 的 矩阵 [Pmin Pmax];，S1 一 SN 为 各 层 神经 元 的 
个 数 ，TF1~TFN 用 士 指定 各 层 神经 元 的 传递 函数 ， 缺 省 值 为 tansig'， 也 可 设 为 logsig 或 
Purelin 等 可 微 函 数 ，BTEF 用 于 指定 网 络 的 训练 函数 ， 可 以 设 为 tainlm、trainbfg 、trainrp 或 
traingd 等 采用 BP 算法 的 训练 函数 ， 缺 省 值 为 traintm，BLF 用 于 指定 权 值 禾 值 的 学 习 肯 
数 ， 矶 省 值 为 learngdm'， 也 避 以 是 其 他 采用 BP 算法 的 学 习 函 数 ，PF 用 于 指定 网 络 的 性 能 
通 数 ， 可 设 为 mse、msereg 等 可 微 性 能 锁 数 ， 缺 省 值 为 mmse'。 

例 3.7 对 以 下 样本 数据 , 采用 newff 建立 前 向 神经 网 络 ,其 网 络 结构 如 图 3.3 所 示 。 
P=[B 765432 1 0; 
T=I0 1232123 9 
net=newff([0 8].[6 1],(fYtansig "purelin ) 7) 

对 网 络 进行 训练 和 仿真 : 
net = train ( net， 了 P，T) 

Y=sim(net，P) 
训练 和 仿真 结果 为 
立 = 
0.0000 1.0000 2.0000 3.0000 2.0000 10000 2.0000 3.0000 2.0000 
参见 ，newcf、newelm、sim、init、adapt、train 和 trains 函数 。 

















6.，、newfftd 
功能 ;建立 一 个 具有 输入 延迟 的 前 向 BP 网 络 。 
格式 : 


四 net = newfftd 
加 net= newfttd (PR,ID,[S1S2…SN],{TFLTF2…TFN } BTF, BLER, PEF) 
说 明 : 
沪 函 数 用 于 建立 一 个 N 层 前 向 BP 网 络 ， 网 络 输 入 经 由 指定 延迟 后 进入 网 络 的 第 一 
层 。 网 络 各 层 的 加 权 胃 数 为 dotprod， 输 入 函数 为 netsum， 各 层 传递 函数 由 用 户 设 定 。 各 
神经 元 权 值 和 疯 值 的 初始 化 函数 为 initnw， 网 络 的 自 适应 调整 函数 为 fains， 并 根据 指定 的 
学 习 函 数 对 权 值 和 闪 值 进行 更 新 ， 网 络 的 训练 函数 由 用 户 指定 。 
函数 调用 形式 四 参见 newe 函数 。 函 数 的 调用 形式 @ 返 回 具 有 输入 延迟 的 BP 网 络 对 象 
net， 此 时 函数 的 输入 PR 为 表示 网 络 输入 矢量 取 值 范围 的 矩阵 [pmin Pmaxl;，JD 为 输入 延 
迟 矢 量 ，S1~-SN 为 各 层 的 神经 元 个 数 ， TFI~TFN 指定 各 层 神经 元 的 传递 函数 ， 可 以 是 
tansig、!ogsig 或 Purelin 等 可 微 明 数 ， 缺 省 值 为 tansig ;BTF 用 于 指定 网 络 的 训练 函数 ， 可 
以 是 tainljm、trainbfg 、trainrp 等 采用 BP 算法 的 训练 函数 ， 缺 省 值 为 tmaintm; BLE 用 于 指 
定 权 值 和 阔 值 的 学 习 函 数 ， 缺 省 值 为 learngdm'， 也 可 以 是 基于 其 他 BP 算法 的 学 习 函 数 ， 
PF 用 于 指定 网 络 的 性 能 函数 ， 缺 省 值 为 "mse'， 也 可 设 为 msereg 等 可 微 性 能 函数 。 
例 3.8 假设 输入 和 日 标 序列 分 别 为 
P=tt001101 0 
T=ft-l010-1 上 -135; 
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建立 一 个 两 层 网 络 ， 网 络 的 第 一 导 有 三 个 神经 元 ， 该 层 和 输入 由 网 络 输入 及 其 一 拍 延 巡 量 构 
成 ， 神 经 元 传递 函数 为 tansig， 输 出 层 神 经 元 传递 玛 数 为 purelin， 其 网 络 结构 如 图 3.5 
所 示 。 




















了 DEL0.1 ITWTLI]} ELW{2.1 


bflji bf21 








输入 第 1 层 第 2 度 


图 3.5 其 有 一 拍 输 入 延迟 的 商 民 前 剖 网 络 


net=newfftd(f0 1,[0 1, 委 1,ftansig "pufelin 了 7 
对 网 络 进行 训练 和 仿真 : 
nettrainParam.epochs=50: 
Pet = train ( net, P,T)》 
立 =sim(netP) 
训练 和 仿真 结果 为 
立 = 
[L0000] {-1.0000] 10.0000] [1.0000] [0.0000] [10000] 11.0000] [10000] 
参见 ， newcf、newelm 、sim、init、adapt、train 和 trains 冰 数 。 


7，Dnewgrnn 

功能 : 设 诗 一 个 广义 阿 归 网 络 。 

格式 : 

人 net = newgman 

@@ net=newgmn (PT spread ) 

说 明 : 

广义 回归 网 络 是 径 向 基 函 数 网 络 的 变形 ， 主 要 用 于 解决 函数 逼近 问题 ， 本 函数 可 以 快 
速 设 计 一 个 广义 回归 网 络 。 广 义 回归 网 络 是 一 个 两 层 神经 网 络 ， 第 一 层 采用 径 向 基 神 经 
元 ， 传 递 函 数 为 radbas， 加 权 函 数 为 dist， 输 入 函数 为 netprod， 第 二 层 神 经 元 的 传递 函数 
为 purelin， 加 权 函 数 为 normprod， 输 入 函数 为 netsum。 

函数 调用 形式 GD 参见 newc 冰 数 。 函 数 的 调用 形式 @ 返 回 广义 回归 网 络 对 象 net， 此 时 
函数 的 输入 P、T 分 别 为 网 络 输入 样本 矢量 和 输出 目标 矢量 构成 的 矩阵 ; .spread 为 扩展 党 
数 ，spread 越 大 ， 则 函数 越 平滑 ， 当 spread 小 于 输入 矢量 间 的 典型 距离 时 ， 网 络 拟 合 的 函 
数 将 非常 逼近 于 样本 矢量 数据 ，spread 的 缺 省 值 为 1。newgmn 函数 把 第 一 层 神经 元 权 信 设 
置 为 输入 P 的 转 置 矩 阵 P， 阅 值 设置 为 0.8326/spread， 第 二 层 神经 元 权 值 设置 为 目标 矢 
量 T。 
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例 3.9 假设 输入 和 目标 矢量 的 矩阵 分 别 为 
P=[0 1 2 3 41 


T=Ti -31 -4 -43 -2 
设计 个 广义 辐 归 网 络 ， 其 网 络 结构 如 图 3.6 所 示 。 
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图 36 广义 回归 网 络 结构 图 
net = newgrmn(P,T); 
仿真 结果 为 
Y= simmn(netP) 
Y= 
-1.8$11 -3.1837 -4.3706 -3.9699 -2.8723 

参见 ，sim、newrb、newrbe 和 newpnn 果 数 。 
8，newhop 


功能 :建立 一 个 Hopfield 反馈 网 络 。 

格式 : 

人 net = newhop 

@ net=newhop (T) 

说 明 : 

Hopfield 网 络 主要 用 于 解决 联想 记忆 问题 ， 该 网 络 外 一 层 神经 元 组 成 ， 并 且 具 有 自 反 
馈 。 网 络 神经 元 的 加 权 蚊 数 为 dotprod， 输 入 函数 为 netsum， 神 经 元 传递 函数 为 sadins 。 
Hopfieid 网 络 运行 稳定 后 的 输出 为 用 户 和 预先 提供 的 目标 矢量 ， 即 网 络 的 稳定 点 。 

函数 调用 形式 @ 参 见 newe 函数 。 函 数 的 调用 形式 @@ 返 回 Hopfield 网 络 对 象 net， 此 时 
函数 输入 T 为 日 标 矢量 组 成 的 抢 阵 ， 目 标 矢 
量 中 的 元 素 必 须 是 +]1 或 -1。 

例 3.10 假定 目标 矢量 为 

T=[1-1181L-L-H'， 
建立 - -个 Hopfield 网 络 ， 其 网 络 结构 如 图 3.7 
所 示 。 

met = newhop (了 入 

Ai={[0.9; -0.8，0.7;0.71 

Y= sim (net, {1,2)},{} Aiy 
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对 下 面 的 矢量 进行 联想 记忆 。 并 让 网 络 工作 两 个 时 间 步 长 ， 运 行 结 昌 为 
立 { 1 
ans 三 
-0.9283 -0.9060 0.8837 0.8837 
YL 2 
ans = 
1 -1 T 1 
可 见 网 络 在 工作 两 个 时 间 步 长 后 就 已 达到 稳定 状态 。 

参见 :sim 和 satlins 函数 。 

9.newlin 

功能 ， 建 立 一 个 线性 神经 网 络 。 

格式 : 

人 net = newlin 

@@ net=newlin ( PR,S,ID,LR) 

图 net=newlin (PR,S,0,P) 

说 明 : 

线性 神经 网 络 主要 用 手 自 适应 泪 波 器 设计 和 信号 有 预测， 该 网 络 由 一 居 神 经 元 组 成 ， 神 
经 元 的 加 权 函 数 为 dotprod， 输 入 函数 为 netsum， 传 递 函数 为 purelin。 神 经 元 的 权 值 和 阅 
值 初始 化 函数 为 initzero， 白 适应 调整 秀 数 和 训练 函数 分 别 为 tains 和 trainb， 它们 都 使 用 
学 习 函 数 leamwh 对 权 值 和 阔 值 进行 调整 ， 性 能 函数 为 mse。 

闸 数 调用 形式 参见 newc 冰 数 。 函 数 的 调用 形式 @@ 返 回 线性 神经 网 络 对 象 net， 此 时 
函数 输入 PR 为 表示 网 络 输入 矢量 取 值 范围 的 拨 阵 [Pmin Pmax]，S 为 输出 矢量 的 维 数 ， 症 
为 输入 延迟 矢量 ， 缺 省 值 为 [0];LR 为 学 习 速 率 ， 缺 省 值 为 0.01。 

在 调用 形式 @ 中 ， 白 变量 PR 和 $S 的 含义 如 调用 形式 @@，P 为 网 络 输入 矢量 组 成 的 拖 
阵 。 这 时 函数 除 建立 一 个 线性 神经 网 络 对 象 外 ， 还 会 根据 输入 矢量 P 确定 最 大 的 稳定 学 习 
速率 。 

例 3.11 假设 输入 和 目标 矢量 矩阵 为 

P= 了 0 1 2 3 4 





T=[-L1 -31 -54 -3 -821 [we | 
建立 一 个 单 神经 元 线性 神经 网 络 ， 其 网 络 Gy 
结构 如 图 38 所 示 。 Ca ”站 

net = newlin( [0 51，1)》 UL 1 

对 网 络 进行 调 练 和 仿真 输入 线性 居 

net = train ( neb P,T》) 

Y=sim (nerP) 独 38 线性 神经 网 络 结构 图 

YY= 四 


-1.155$7 -3.0593 -4.9629 “6.8665 -8.7701 
参见 : newlind、sim、init、adapt、train、trains 和 trainb 函数 。 


俐 
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10，、hewlind 
功能 : 设计 一 个 线性 神经 网 络 。 
格式 : 
C@D net = newlind 
全 net =newlind (有 下 Pi) 
说 明 : 
该 函数 根据 用 户 提供 的 输入 矢量 和 目标 矢量 设计 线性 神经 网 络 ， 并 使 得 网 络 输出 矢量 
和 日 标 矢量 间 达 到 最 小 均 方 误 美 。 该 晃 数 利用 最 小 二 乘法 求解 网 络 权 值 和 靖 值 。 
函数 调用 形式 @ 参 见 newc 函 教 。 函 数 调用 形式 @@ 返 回 线性 神经 网 络 对 象 net， 此 时 函 
数 自 概 量 P 为 网 络 的 输入 矢量 ， T 为 目标 矢量 ，Pi 为 初始 输入 延迟 条 件 ， 缺 省 值 为 [ ]。 丽 
数 输入 可 以 是 撩 阵 或 单元 数组 ， 单 元 数组 的 形式 适用 十 多 输入 和 输入 有 延 退 的 情况 。 
例 3.12 ”根据 以 下 桩 本 数据 设计 一 个 线性 神经 网 络 ， 其 网 络 结构 如 图 3.8 所 示 。 
P=[0 1 2 3 4 
T=[-1 -3.1 -3$54 -7.3 -821]， 
net=newlind(P,T)i; 
仿真 结果 为 
Y=simtnetP) 
Y= 
-1L2800 -3.1400 -5.0000 
-6.8600 -8.7200 
参见 ， newlin 和 sim 组 数 。 














11、newlvq 
功能 ， 建 立 一 个 学 习 矢量 量化 网 络 。 
格式 ; 


GD net = newlvq 

加 net = newlvq{ PR,S1,PC,LR,LEF) 

说 明 ， 

学 习 矢 量 量化 网 络 主要 用 于 解决 分 类 问题 。 该 网 络 出 斯 层 神经 元 组 成 ， 网 络 的 第 一 层 
为 竞争 层 ， 第 二 层 中 的 每 个 神经 元 只 与 竞争 层 中 的 部 分 神经 元 相连 ， 网 络 中 的 每 个 神经 元 
都 没有 闪 值 。 网 络 第 一 - 层 神经 元 的 传递 函数 为 compet， 加 权 函 数 为 negdist， 权 值 初始 化 函 
数 为 midpoint， 网 络 第 二 层 神经 元 的 传递 函数 为 pureljin， 加 权 函 数 为 dotprod ， 权 值 都 为 
1。 网 络 使 用 trains 和 trainr 函数 进行 自 适应 调整 和 训练 ， 这 两 个 函数 使 用 指定 的 学 习 函数 
对 竞争 层 神经 元 的 权 值 进行 修正 。 

函数 调用 形式 四 参见 newe 蝎 数 。 函 数 的 谓 用 形式 加 返回 学 习 矢 量 量化 网 络 对 象 net， 
函数 的 输入 PR 为 表示 网 络 输入 矢量 取 值 范围 的 矩阵 [Pmin Pmax]; S1 为 竞争 层 神经 元 的 个 
数 ，PC 为 哩 (直接 由 PC 的 维 数 确定 ) 维和 泉 量 ， 其 中 昱 为 网 络 输入 矢量 的 类 别 数 ， 也 是 
输出 层 的 神经 元 个 数 ，PCGD) 为 网 络 输入 矢量 中 第 类 矢量 所 占 的 比例 ， 即 输出 层 中 和 竞争 : 
屁 第 主 个 神经 元 相连 的 神经 元 所 占 的 比例 ，LR 为 学 习 速率 ， 缺 省 值 为 001，LE 为 学 习 函 ; 
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数 ， 可 以 是 leamlvl 或 learnlv2 明 数 ， 缺 省 值 为 eamlvl'， 网 络 只 有 先 使 用 leamlvl 函数 进 
行 学 习 后 ， 才 能 再 用 leamlv2 进行 学 习 。 
例 3.13 ”假定 要 将 下 列 样 本 矢量 分 为 两 类 ， 每 类 所 占 的 比例 均 为 0.5: 
P=G9 -2 -1 2 2 -5 
2-1 -2 3 -2 
T=IlL 2 2 1 1 ?2 
建立 学 习 撩 量 量化 了 网络， 网络 竞争 层 由 四 个 神经 元 组 成 ， 其 网 络 结构 如 图 3.9 所 丰 。 


2 1 2 
人 上 太 上 人 时 
输入 竞争 层 


线性 层 








图 39 学 习 估 其 基 化 网 络 结构 赂 
net= newivq([-2 3 -2 3，4，[0.5 0.5] 
于 标 矢量 T 必 须 转 化 为 单 值 矢量 组 ， 才 能 作为 日 标 矢 量 使 用 : 
Tl = ind2vyec(TJ; 
net = train ( net, P, T1 ); 
仿真 结果 为 
YY= vec2ind (sin (nebP)) 
了 = 
1 2 2 1 上 2 
参见 : sim、init、adapt、train、trains、trainr、ilearmlvl 和 learnlv2 函数 。 





12.，newp 
功能 ， 建立 一 个 感知 器 。 
格式 : 
人 net= newp 
@@ net = newp (PR,.S,TF,LF) 
说 明 : 
感知 器 用 于 解决 线性 可 分 问题 。 该 网 络 出 一 层 神经 元 构成 ， 神 经 元 的 加 权 函 数 为 
dotprod， 输 入 函数 为 netsum， 传 递 秀 数 可 以 是 hardlim 或 hardlims， 网 络 权 值 和 亢 值 的 初 
始 化 函数 为 initzero， 采 用 训练 函数 trains 和 traine 对 网 络 进行 自 适应 调整 和 训练 ， 学 习 阴 
， 数 可 以 是 leamp 或 learmpn， 性 能 函数 为 mae。 
函数 调用 形式 GD 参见 newec 函数 。 函 数 的 调用 形式 @@ 返 加 感知 器 网 络 对 象 net， 此 时 函 
; 数 的 输入 PR 为 表示 网 络 输入 矢量 取 值 范围 的 矩阵 [Pmin Pmax];， 8 为 神经 元 个 数 ，TE 为 伟 
; 递 诅 数 ， 缺 省 值 为 ardlim'，LF 为 学 习 函 数 ， 缺 省 值 为 earmp'。 
例 3.14 ”根据 于 列 样本 矢量 和 目标 矢量 : 


但 
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P=B -2 -1 2 2 -1; 
2-L1 -L 2 3 -和 





T=[L 0 0 1 1 0]: [oo | 
建立 “个 感知 器 网 络 ， 该 网 络 由 一 个 神经 元 构成 ， 其 FE] 中 
网 络 结构 如 图 3.10 所 示 。 困 
net=newp([-2 3;-2 3],1); 一 一 
训练 和 仿真 结果 为 各 和 和 
net = train ( net  P, T7》 图 3.10 感知 器 网 络 结构 图 
Y=sim(net,P) 


立 = 
1 0 0 1 1 0 
参见 ;sim、init、adapt、train、hardtim、hardlims 、learnp 、learnpn 、trains 和 trainc 
函数 。 
13，newpon 
功能 ， 设 计 一 个 概率 神经 网 络 。 
格式 : 
全 pet = newpnn 
@@O net = newpnn (也 了 spread ) 
说 明 : 
概率 神经 网 络 是 径 向 基 函 数 网 络 的 变形 ， 主 要 用 于 解决 分 类 问题 。 概 率 神经 网 络 由 两 
层 神经 元 构成 ， 只 有 第 一 层 神经 元 具有 阀 值 。 网 络 的 第 一 层 采用 径 向 基 神 经 元 ， 传 递 函数 
为 radbas， 加 权 冰 数 为 dist， 输 入 冰 数 为 netprod; 第 二 层 神 经 元 采用 竞争 传递 冰 数 
compet， 加 权 函 数 为 dotprod。 
函数 调用 形式 四 参见 newc 函数 。 函 数 的 调用 形式 加 返回 概率 神经 网 络 net， 函 数 输入 
P、T 分 别 为 输入 样本 矢量 和 目标 输出 矢量 构成 的 矩阵 :spread 为 扩展 常数 ， 缺 省 值 为 
0.1。newpnn 扼 数 把 第 --- 层 昼 经 元 的 权 值 设置 为 网 络 输入 矩阵 P 的 转 置 矩 阵 P， 阔 值 设置 
为 0.8326/ spread， 第 二 层 神经 元 的 权 值 设置 为 网 络 的 目标 矢量 T。 
例 3.15 根据 下 列 样本 失 量 和 目标 矢量 : 
P=3 -2 -1 2 2 -4 
2- -1L 2 3 2]: 
T=[L 2 2 1 1 2]; 
TI = ind2vec (了 
设计 -个 概率 神经 网 络 ， 藉 网络 结 构 如 图 3.11 所 示 。 
net = newpnn (了 P, TI1); 
仿真 结果 为 
Yc=vec2ind (sim (nebP)) 
Yc= 

















1 2 2 1 1 2 
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输入 径 向 基层 竞争 层 


图 3.11 概率 神经 网 络 结构 图 

参见 : sim、newrb、newrbe、newgrnn 、ind2vec 和 vec2ind 函数 。 

14，new 中 b 

功能 : 设计 -个 径 向 基 函 数 网 络 。 

格式 : 

人 net= new 中 

@@ met = newrb (了 PT goal, sprcad, MN, DEF ) 

说 明 : 

径 向 基 函 数 网 络 主 要 用 于 解决 明 数 道 近 问 题 。 生 向 基 冰 数 网 络 由 两 慨 神 经 元 构成 ， 网 
络 的 第 一 层 为 么 向 基层 ， 神 经 元 传递 函数 为 radbas， 加 权 丙 数 为 dist， 输 入 函数 为 
netprod， 第 二 层 神 经 元 的 传递 函数 为 纯 线 性 函数 purelin， 加 权 函 数 为 dotprod， 输 入 函数 
为 netsum。 

函数 调用 形式 人 参见 newc 函数 。 亏 数 的 调用 形式 @@ 返 问 径 向 基 函 数 网 络 对 象 net， 此 
时 函数 的 输入 P 为 网 络 输入 样本 矢量 ; T 为 日 标 矢 量 : goal 为 网 络 的 均 方 误差 性 能 指标 ; 
spread 为 信 展 常数 ， 缺 省 值 为 1.0: MIN 为 昼 经 元 个 数 最 大 值 ， 缺 省 值 为 输入 样本 矢 遇 的 个 
数 ; DEF 为 训练 过 程 的 显示 频率 ， 缺 省 值 为 25。 

该 函数 利用 迁 代 方法 建立 网 络 ， 开 始 时 网 络 径 问 基层 的 神经 元 个 数 为 军 ， 然 后 每 友 代 
一 次 ， 径 向 基层 就 添加 一 个 神经 元 。 在 每 次 迭代 中 ， 网 络 疹 先 进行 仿真 并 找到 对 应 于 最 大 
输出 误差 的 输入 样本 矢量 ， 然 后 径 向 基层 添加 一 个 神经 元 并 把 权 值 设 为 该 输入 矢量 ， 最 后 
肯 修 改线 性 层 的 权 值 以 达到 最 小 误差 。 

例 3.16 “根据 以 上 数据 ， 设 计 一 个 径 向 基 末 数 神经 网 络 : 

P=io 1 2 3 4 
T=[-1 -3.1 -354 -43 2]; 
net = newrb (P,T) 
网 络 结构 如 图 3.12 所 示 。 熏 真 结果 为 
Y=simtnebP) 
Y= 
-1L0000 -3.1000 -5.4000 -43000 -2.0000 
参见 ，sim、newrbe、newgrmn 和 newpnn 约 数 。 


人 
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2 
bt bf24 
1 了 
) J) L 


1 
人 J) 
输入 径 向 基层 线性 层 











图 3.12 径 癌 基 力 数 网 络 结构 网 


15，、newrbe 

功能 ;精确 设计 -一个 径 向 基 函 数 网 络 。 

格式 : 

CD net = newrbe 

园 net = newrhbe {( 卫 T，spread ) 

说 明 : 

该 函数 可 以 精确 设计 一 个 径 向 基 肯 数 网 络 ， 使 得 网 络 对 输入 样本 矢量 的 响应 输出 和 日 
标 失 量 相 问 。 

勇 数 调用 形式 0 参见 newc 函数 。 函 数 的 调用 形式 四 返回 径 向 基 冰 数 网 络 对 象 net， 此 
时 郑 数 的 输入 P 和 T 分 别 为 输入 样本 和 失 量 矩阵 和 目标 矢量 抢 阵 ，spread 为 扩展 常数 ， 缺 省 
值 为 10。newrbe 函数 把 径 向 基层 的 神经 元 权 值 设置 为 网 络 输 入 矩阵 P 的 转 丧 矩阵 P， 闪 
值 设 置 为 0.8326/spread， 第: 层 神经 元 的 权 值 W{2.1} 和 阔 值 bf2} 满 足 于 式 : 

[ 允 {2.1)bf{2 人 1* [Ap ones1= 了 

其 中 ，A{1] 为 第 一 层 的 输出 。 

例 3.17 “对 以 下 样本 数据 精确 设计 … 个 径 向 基 函 数 网 络 ， 其 网 络 结构 图 如 图 3.12 
所 示 。 





P=[0 1 2 3 41; 

T=IFL -341 -354 -43 -21 

net = newrIbe (了 ,了 六 

仿真 结果 为 
YY=sim(nebP) 
立 = 
-1.0000 -3.1000 -5.4000 -43000 -2.0000 

参见 ，sim、newrb、newgrnn 和 newpnn 函数 。 
16，mnewsom 
功能 :建立 一 个 自 组 织 映射 网 络 。 
格式 : 


人 net = newsom 
国 net =newsom (PR，[D1, D2,…].TECN，DFCN，OLR， OSTEPS，TLR，TND ) 
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说 明 : 


白 组 织 映射 网 络 常用 于 解决 分 类 问题 。 该 网 络 由 - - 层 神 经 元 构成 ， 神 经 元 按照 用 户 指 
定 的 拓扑 结构 在 多 维 空间 中 进行 排列 ， 神 经 元 没有 疝 值 。 神 经 无 的 加 权 函 数 为 negdist， 输 
入 了 男 数 为 netsum， 传 递 函 数 为 竞争 因数 compet， 权 值 初始 化 函数 为 midpoint ， 白 适应 调整 
畏 数 和 训练 冰 数 分 别 为 rains 和 trainr， 学 习 拖 数 为 leamsom。 网 络 的 训练 分 为 排列 和 调整 


两 个 阶段 进行 。 


函数 调用 彤 式 @ 四 参见 newe 敬 数 。 范 数 的 调用 形式 的 返 目 白 组 织 且 射 网 络 对 象 net， 此 








计 冰 数 的 输入 PR 为 表示 网 络 输入 矢量 取 值 范围 的 拷 阵 [Pmin Pmax]，Di 为 神经 元 在 多 维 空 
癌 中 排列 时 各 维 的 个 数 ， 缺 省 值 为 [ 5，8 ]: TECN 为 护 扑 函数 ， 缺 省 值 为 hextop': DFCN 
为 距离 函数 ， 缺 省 值 为 inkdist，OLR 为 排列 阶段 学 习 速 率 ， 缺 省 值 为 09: QOSTEPS 为 排 





列 阶段 学 习 次 数 ， 缺 省 值 为 1000:， TLR 为 调整 阶段 学 习 速 率 ， 缺 省 值 为 0.02;， TND 为 调 


整 阶段 贫 域 半 季 ， 缺 省 值 为 1。 











例 3.18 假定 要 把 下 角 样 木 矢量 分 为 四 类 


P=D3 -2 1 2 -2 
2 -1 -1 2 3 


则 需要 建立 一 个 四 神经 无 的 自 组 纪 


络 结构 如 图 3.13 所 未 。 


net= newsom([-2 3;:-2 3],[2 27 


网 络 训练 和 仿真 结果 为 


met = train ( netP ); 


-1 2 1; 
-2 2 3 
只 映射 网 络 ， 其 网 





TY=vec2ind (sim (nebP)) 图 3.13“ 自 组 织 映射 网 络 结构 图 


下 = 
1 4 2 


1 3 4 3 1 


参见 ，sim、init、adapt 和 train 冰 数 。 


3.2.2 ”神经 网 络 的 使 用 函数 


表 3-3 列 时 了 神经 网 络 的 基本 使 用 函数 ， 它 们 可 分 别 用 来 对 神经 网 络 进行 训练 、 显 
示 、 初 始 化 和 仿真 ， 调 用 这 些 轿 数 可 以 完成 对 神经 网 络 对 象 的 基本 操作 。 






































表 3-3 神经 网 络 的 使 用 函数 
函数 名 称 功 能 

Adapt 对 神经 网 络 进行 自 适 应 调整 

Disp 显示 神经 网 络 对 象 的 属性 
Display 显示 神经 网 络 对 象 的 名 称 和 属性 | 
: Dit 对 神经 网 络 的 参数 进行 初始 化 
Revert 将 神经 网 络 的 权 值 和 辣 值 重新 设置 为 初始 人 
: ai 对 神经 网 络 进行 训练 
: Sim 对 神经 网 络 进行 仿真 
准 
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1，、adapt 

功能 : 对 神经 网 络 进行 犁 适应 调 刺 。 

格式 : 

[net，Y，E，Pf，Af，TR ] = adapt (net， 王 ，T，Pi，Ai) 

说 明 : 

对 于 神经 刚 络 的 每 一 个 输入 ，adapt 函数 将 计算 网 络 的 输出 及 误 乱 ， 然 后 调用 自 适应 谢 
整 函数 netadaptFcn， 并 根据 白 适 应 调整 前 数 参 数 neLadaptParam 对 网 络 中 的 权 值 及 疯 值 进 
行 调 整 。 

adapt 函数 的 输入 net 为 神经 网 络 对 象 ，P 为 输入 矢量 ，T 为 日 标 矢 量 ，Ri 为 输入 延迟 
的 初始 状态 ，Ai 为 层 延迟 的 初始 状态 ， 其 中 ，P 和 T 中 可 以 是 多 个 时 刻 的 输入 和 日 标 矢 
量 。 在 函数 返回 值 中 ，net 为 更 新 后 的 神经 网 络 对 象 ，Y 为 网 络 输 山 ，E 为 输出 和 日 标 之 问 
的 误 莽 ，Pf 为 调 闽 终 让 时 的 输入 延迟 状态 ，Af 为 调整 终止 时 的 层 延 迟 状态 ，TR 中 记录 了 
训练 次 数 和 训练 过 程 中 网 络 性 能 的 变化 情况 。 函 数 中 的 Mi、Ai、Pf 和 Af 仅 用 于 具有 输入 
延迟 利 层 延 巡 的 网 络 。P、T、Pi、Ai、Y、E、Pf 和 Af 等 输入 和 输出 量 可 以 是 单元 数组 
或 矩阵 ， 但 一 般 情况 下 都 采 用 单元 数组 的 形式 ， 只 有 当 P 和 T 中 仅 包 含 一 个 时 间 步 长 的 输 
入 和 目标 失 量 时 ， 才 采用 矩阵 形式 。 

示例 参见 例 3.19。 

参见 ，sim、init、train 和 revert 的 数 。 

2.、disp 和 display 

功能 : 显示 神经 网 络 对 象 的 属性 。 

格式 : 

CD disp (net) 

加 display (net ) 

说 明 ， 

这 两 个 函数 都 用 于 显示 神经 网 络 对 象 的 属性 ， 唯 一 不 同 之 处 在 F display 函数 还 要 显示 
神经 网 络 对 象 的 名 称 ， 而 disp 则 不 显示 。 

参见 : adapt、sim、init 和 train 函数 。 























3，init 

功能 :对 神经 网 络 的 参数 进行 初始 化 。 

格式 : 

net = init( net ) 

说 明 : 

该 函数 通过 调用 初始 化 函数 netinitFcn， 并 根据 初始 化 函数 参数 netinitParam 对 网 络 权 
值 和 疝 值 进行 初始 化 。 : 

示例 参见 例 3.19。 ; 

参见 ，adapt、sim、train、initlay、initnw 、initwb 、rands 和 revert 函数 。 
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4，Tevert 

功能 : 该 男 数 将 网 络 中 的 权 值 和 阅 值 恢复 为 初始 值 。 

格式 : 

Det = Tevert ( net ) 

说 明 ， 

该 务 数 将 网 络 中 的 权 值 和 疯 值 饮 复 为 最 近 一 次 初始 化 时 产生 的 初始 数值 ， 如 果 网 络 结 


构 在 初始 化 后 发 生 了 变化 ， 权 值 和 阅 值 将 不 能 恢复 ， 这 时 将 把 它们 都 设置 为 0。 


示例 参见 例 3.19。 

参见 : adapt、sim、train 和 init 肯 数 。 

5 train 

功能 :对 神经 网 络 进行 训练 。 

格式 : 

fnet TR, Y, E, Pf, Af] = train (neb PT, Pi Ai YV,TV ) 

说 明 : 

train 函数 通过 调用 网 络 训练 函数 nettrainFcn， 并 根据 训练 函数 参数 nettrainParam 对 


网 络 进行 训练 。 


其 中 ，net 为 神经 网 络 对 象 ，P 为 网 络 输入 ，T 为 目标 矢量 ，Pi 为 输入 延迟 的 初始 状 
Ai 为 层 延迟 的 初始 状态 ，VYV 为 验证 矢量 ，TV 为 测试 矢量 。 在 函数 返回 值 中 ，TR 为 


训练 记录 ，Y 为 网 络 输出 ，E 为 输出 和 日 标 矢量 之 间 的 误 茬 ， Bf 为 训练 终生 时 的 输入 延 
退 状态 ，Af 为 训练 终止 时 的 层 延 迟 状 态 。 该 函数 中 的 P_T、P、Ai、VYV、TV、Y、BE、 
Pf 和 Af 各 参量 可 以 是 单元 数组 或 年 阵 ， 但 一 般 情况 下 都 采用 单元 数组 的 形式 。 


验证 矢量 VV 和 测试 泉 量 TV 用 于 提高 和 检验 网 络 的 推广 能 力 。 汉 网 络 的 进一步 训练 


破坏 了 网 络 对 验证 矢量 VV 的 推广 能 力 时 ， 网 络 的 训练 将 提前 停止 ;测试 矢量 则 用 于 检测 
网 络 的 推广 能 力 。 


示例 参见 例 3.19。 

参见 : adapt、sim、init 和 revert 郴 数 。 

6、sim 

功能 ， 对 神经 网 络 进行 仿真 。 

格式 ， 

四 [PE AfE,perf] =sim nebP Pi AbT) 

加 [ 立 PfE Af E, perf] = sim (net {Q TS Pi Ai IT 
图 [PFAf E, perf ] = sim (neb Q, Pi Ai T) 
说 明 ， 

sim 函数 用 于 实 坝 神经 网 络 的 仿真 。 

在 sim 函数 的 调用 形式 四 中 ， 输 入 net 为 神经 网 络 对 象 ，P 为 网 络 输入 ， 为 输入 延 


壕 的 初始 状态 。Ai 为 层 延 迟 的 初始 状态 ，T 为 目标 矢量 。 在 通 数 返回 值 中 ，Y 为 网 络 输 


出 ， 


从 


BE 为 训练 终止 时 的 输入 延迟 状态 ，Af 为 训练 终止 时 的 层 延迟 状态 ，E 为 输出 和 目标 夭 
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量 之 间 的 误差 ，perf 为 网 络 的 性 能 值 。 该 函数 中 的 P、T、Pi、Ai、Y、E、Pf 和 Af 等 参量 
引 以 昆 单元 数组 或 延 阵 。sim 函数 的 调 用 几 式 @@@@ 用 十 没有 输入 的 网 络 ， 其 中 ，Q 为 批 处 
理 数 据 的 个 数 ，TS 为 网 络 仿真 的 时 间 步 数 。 

例 3.19 假定 网 络 的 输入 和 目标 序列 分 别 为 
P={0-1110-l1100110-1-11110-1); 
T=ft0-1021-1010121-1-20221 0} 

这 里 的 P 和 了 者 是 单元 数组 。 建 立 一 个 具有 输入 延迟 的 线性 神经 网 络 对 P 和 T 进 行 学 习 : 
net= newlin [-1 1 1 [0 1 0.005) 
该 网 络 输入 的 数值 范围 证 [-1 4， 网络 由 一 个 神经 元 构成 ， 该 神经 元 的 输入 为 当前 网 络 输 入 
及 其 一 拍 延 迟 量 ， 网 络 学 习 速 率 为 0.005， 其 网 络 结构 如 图 3.14 所 示 。 
首先 对 网 络 进行 初始 化 ， 并 查看 网 络 


























初始 化 后 网 络 的 权 值 和 阔 值 : 
net = init (net ) TDLO1 jwto] 四 
neUIW {1L 1 HP 
0 0 人 1 JJ 人 ) 
netb {1} 输入 线性 层 
am 一 图 3.14 ， 带 有 输入 延迟 的 线性 网 络 结构 网 
0 


然后 对 网 络 进行 自 适 应 调整 : 
[net y,e,pf af ]= adapt(net 了 P, 了 六 
经 过 该 轮 自 适应 整 后 ， 神 经 元 的 权 值 和 阅 值 变 为 
BetIW {l1, 1} 
ans = 
0.0677 0.0675 
netb {1} 
ans 一 
0.0377 
这 时 使 用 恢复 函数 ， 将 权 值 和 闭 值 重新 设置 为 初始 值 : 
Pet = Tevert《 net 为 
hetIW {1, 1} 
ans = 





0 0 
netb 《1} 
ans = 
0 
可 见 网 络 中 的 权 值 和 闪 值 已 经 恢复 为 初始 值 。 
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最 后 ， 利 用 train 函数 对 网 络 训练 100 次 : 
net-trainPararm.epochs = 100; 
net = train (net, 了 P, 工 ); 
并 对 训练 好 的 网 络 进行 仿真 : 
[y, pf at, e,perf]1= sim (neb P, 0 (TD) 


仿真 结果 为 
y= 
Columns 1 through 7 
[0.0707] -0.8369] “上 0.0105] [1.9672] [1.0595] -0.8369] [0.0105] 
Columns 8 through 14 
[1.0595] [0.0707] [0.9783] 11.9672] 【1.0595] [0.8369] 三 1.8258] 
Columns 15 throushb 19 
[-0.0105] [1.96721 11.9672] 站 .0595] [0.8369] 
PE= 
[CU 
引 = 


Empty cell array: 1-by-0 
台 一 


Columns 1 through 7 


{-0.0707] “上 三 0.16311 10.0105] 50.0328] [0.0595] -0.1631] [0.0105] 
Columns 8 through 14 


{-0.0595] 上 -0.0707] [0.0217] [0.0328] -0.0595] [0.1631] [-0.174 人 ] 
Columns 15 through 19 


[0.0105] [0.0328] [0.0328] “三 0.0595] [0.83691 
pedE = 
0.0442 


其 中 ，perf 为 网 络 输出 与 目标 矢量 的 均 方 误差 。 
参见 : adapt、sim、init 和 revert 函数 。 


3.2.3 ”神经 网 络 的 初始 化 函数 
网 络 的 初始 化 函数 如 表 3-4 所 示 。 
表 3-4 网 络 初始 化 函数 

















[  _ 冰 数 争 称 功能 
Laney 对 神经 网 络 逐 层 进行 初始 化 
initay 


功能 :对 神经 网 络 逐 层 进行 初始 化 。 


直 
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格式 ， 

人 net= initlay (net) 

他 info = initlay ( code ) 

说 明 : 

该 函 数 根据 网 络 各 屋 的 初始 化 函数 netlayersfij,initFca 逐 层 对 网 络 进行 初始 化 。 

网 络 的 调用 形式 @ 返 回 初始 化 后 的 网 络 net。 调 用 形式 @ 返 回 函 数 的 有 关 信 息 ，code 
字符 趾 可 以 是 pnames' 或 pdefaults' ， 其 中 前 形 表 示 初 始 化 函数 各 参数 的 名 称 ， 后 者 表示 初 
始 化 画 数 各 参数 的 取 值 。iniday 函数 没有 参数 。 

网 络 属 性 设置 ， 


newp、newtin、newff、newcf 等 函数 建立 的 网 络 都 采用 initlay 作为 初始 化 函数 ， 如 时 
要 使 自 定义 网 络 利用 initlay 散 数 进行 初始 化 ， 网 络 可 作 如 十 设置: 

(D 将 网 络 初始 化 函数 netinitFcn 设置 为 initay'。 由 于 iniday 函数 没有 参数 ， 这 时 网 
络 初始 化 参数 白 动 设置 为 [ ]: 

人 @) 设置 网 络 每 层 的 初始 化 广 数 netiayers{ij:initFcn。 

参见 :initwb、initmw 和 init 站 数 。 


3.2.4_ 层 初始 化 函数 


网 络 的 层 初始 化 函数 如 表 3-5 所 不 。 
表 3-5 ” 层 初 始 化 函数 




















画 数 名 称 功能 | 
initnw 采用 Neuyen-Widrow 方法 对 网 络 长 进行 初始 化 
initwb 轨 据 已 设 定 的 权 信 和 立信 初始 化 函 教 对 网 络 层 进行 初始 化 
1，initnw 
功能 ， 采 用 Nguyen-Widrow 方法 对 网 络 层 进行 初始 化 。 
格式 : 
net= initnw (netb j) 
说 阴 : 


该 函数 利用 Nguyen-Widrow 方法 对 网 络 net 中 的 第 1 层 进行 初始 化 ， 采 用 该 方法 初始 
化 后 ， 每 个 神经 元 的 激活 区 域 将 均匀 地 分 布 在 输入 空间 中 ， 从 而 可 以 避免 神经 元 的 浪费 , 
同时 提高 了 训练 效率 。 只 有 当 第 层 神经 元 具有 山 值 ， 加 术 函 数 为 dotprod， 输 入 函数 为 
netsum 时 ， 才 能 使 用 initnw 函数 进行 初始 化 。 

网 络 吉 性 设置 ; 

mewft、newecf 等 凋 数 建立 的 网 络 采用 initnw 作为 层 初始 化 函数 ， 如 果 要 使 各 定 义 网 络 j 
的 第 了 层 利用 initpw 曙 数 进行 层 初 始 化 ， 则 网 络 可 作 如 下 设置 : ; 
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《b 将 网 络 初始 化 男 数 netinitFcn 设置 为 imittay'; 

人) 将 层 初始 化 诅 数 neLlayersfijinitFen 设置 为 initnw 。 

参见 ， initwb、initlay 和 init 函数 。 

2、initwb, 

功能 : 根据 已 设 定 的 权 值 和 诸 值 初始 化 函数 对 网 络 层 进行 初始 化 。 

格式 : 

net= initwb ( net i) 

说 明 ， 

该 函数 根据 网 络 net 中 第 i 层 神经 元 权 值 和 疯 值 的 初始 化 阔 数 对 该 居 进 行 初始 化 。 

网 络 属性 设置: 

newp、newlin 等 函数 建立 的 网 络 采用 initnw 作为 层 初始 化 函数 ， 如 果 鉴 使 白 定义 网 络 
的 第 ; 屋 利 用 initwb 范 数 进行 层 初 始 化 ， 则 网 络 可 作 如 下 设置 : 

(D 将 网 络 初始 化 函数 neLinitFcn 设置 为 initlay'， 

人) 将 层 初始 化 青 数 netiayers{ij-initFen 设置 为 initwb' 

G) 设置 输入 尽 权 值 、 网 络 层 权 值 和 阅 值 的 初始 化 函数 netinputWeights{ijj}.initFen、 
met.layerWeights{fijj.initFcn 和 netbiases{ij,inithcn。 

参见 ，initnw、initlay 和 init 盟 数 。 


3.2.5 权 值 和 阔 值 初始 化 函数 


权 值 和 阔 值 初始 化 函数 如 表 3-6 所 示 。 

网 络 属性 设置 ; 

如 果 要 设置 网 络 第 ; 层 的 权 值 和 阔 值 初始 化 函数 ， 可 按 如 下 步骤 进行 : 

(GD 将 网 络 初始 化 函数 netinitEcn 设置 为 initlay ， 

CO) 将 该 层 的 初始 化 函数 netlayerstij,initFcn 设置 为 initwb': 

(3) 将 该 层 的 输入 权 值 、 网 络 权 值 和 阔 值 的 初始 化 函数 netinputWeightsfijjinitfcn、 
netlayerWeightsfij} .initFcn 和 netbiasesfij.initFcn 分 别 设置 为 期 望 的 初始 化 函数 。 


表 3-6 权 值 和 阔 值 初始 化 函数 
































函数 名 称 动能 
initeon 对 疯 值 进行 公 灶 初始 化 
iipero 把 权 值 和 辣 值 初始 化 为 符 
idpoint 把 权 值 初始 化 为 输入 矢量 值 域 的 中 心 
andne 对 权 值 进行 烈 归 一 化 初始 化 
andmr 对 权 值 进行 行 归 -化 初 站 化 
am 对 权 值 和 阅 值 进行 随机 初始 化 








回 第 三 章 基于 MATLAB 6.x 的 神经 网 络 设计 与 分 析 


67 





1.，initcon 

功能 : 对 阔 值 进行 公平 初始 化 。 
格式 : 

吾 = initcon S, PR ) 

说 明 : 


当 网 络 阅 值 学 习 函 数 为 leamcon 时 ， 和 需要 采用 该 函数 对 阅 值 进行 初始 化 ， 由 于 该 函数 
返回 的 各 神经 元 疯 值 相等 ， 因 此 称 为 公平 初始 化 盟 数 。 该 函数 一 般 不 用 来 对 权 值 进行 初 


始 化 。 


函数 的 输入 S 为 神经 元 个 数 ， PR 为 表示 输入 矢量 取 值 范围 的 所 阵 [Pmin Pmaxj， 缺 省 


值 为 HU， 函数 返回 初始 疯 信 和 尖 景 B。 
例 3.20 利用 initcon 通 数 对 -个 两 神经 元 网 络 层 的 岗 值 进行 初始 化 。 
b=initcon(2) 
b= 
5.4366 
5.4366 
参见 ，initwb、initlay 、init 和 learncon 函数 。 
2.，initzero 
功能 ， 把 权 值 和 阅 值 初始 化 为 零 。 
格式 : 
@ W=initzero(S,PR) 
轩 &=initzerofS.[! 31) 
说 明 : 
该 因数 把 岗 值 和 权 值 部 初 始 化 为 零 。 


冰 数 的 输入 S 为 神经 元 个 数 ， 调 用 形式 @ 中 的 PR 为 表示 输入 矢量 取 值 范围 的 矩阵 
[pmin ”Prmax]。 采 用 育 用 形式 @ 时 ， 了 数 返回 权 值 矩阵 史 ， 采 用 调用 形式 人 时， 函数 返回 


阅 值 矢 虽 B。 
例 3.21 利用 initzere 函数 对 一 个 具有 两 神经 元 一 输入 的 网 络 尽 进 行 初始 化 ; 
W=initzero(2.I[0 1-1 1) 
hb = initzero(2,[0 了 jy) 


W= 
0 0 
0 0 
b= 
0 
0 
参见 ，initwb 、initay 和 init 函数 。 
3 midpoint 


功能 ， 把 权 值 初始 化 为 输入 失 量 值 城 的 中 心 。 
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格式 : 
W=midpoint(S，PR ) 
说 明 : 
该 函数 把 权 值 初始 化 为 输入 矢量 值 域 的 中 心 。 
陆 数 的 输入 $ 为 神经 元 个 数 ， PR 是 表示 输入 矢量 取 值 范围 的 拷 阵 EPmin Pmaxl。 函 
数 返 蔬 权 值 矩 阵 W， 玫 阵 中 的 侠 一 行 设 置 为 (Pmin+PmaxJ/2。 
例 3.22 利用 midpoint 函数 对 - ' 个 具有 两 神经 元 一 输入 的 网 络 层 权 值 进行 初始 化 。 
W=midpoint(2,[0 1-1 1) 
W= 
0.3000 0 
0.5000 0 
参见 : initwb 、initlay 和 init 函数 。 
4.， randnc 
功能 ， 对 权 值 进行 询 归 一 化 初始 化 。 
格式 : 
全 W=randnc(S,PR) 
辐 W=randnc(S,R) 
说 明 : 
输入 S 为 神经 元 个 数 ， 函 数 调用 形式 人 中 的 PR 是 表示 输入 矢量 取 值 范围 的 矩阵 PPmin 
Pmax]。 亩 用 形式 @ 中 ，R 为 输入 矢量 的 维 炒 。 函数 返回 一 个 随机 权 介 天 阵 殉 ， 矩 阵 中 的 
每 一 列 都 经 过 了 归 -化 。 
例 3.23 ”产生 一 个 三 行 三 列 的 列 归 一 化 随机 权 值 矩阵 。 
三 =randnc(3,3) 











W= 
0.8412 -0.0298 -0.0750 
-0.S025 0.8305 -0.8294 
0.1997 0.5563 0.5536 
参见 : randnr 函数 。 
Srandnr 
功能 ， 对 权 值 进行 行 归 一 化 初始 化 。 
格式 : 


全 妈 =randnr(S, PRT) 
加 W=randnr(S.R) 
说 明 : 
: 输入 S 为 神经 元 个 数 ， 调用 形式 @ 中 的 PR 是 表示 输入 矢量 取 值 范 四 的 揪 阵 fPmin 
Pmax]， 调 用 形式 @ 中 的 R 为 输入 矢量 的 维 数 。 函 数 返 回 一 个 随机 权 值 失 阵 W， 竹 阵 中 的 
每 一 行 都 经 过 了 归 一 化 。 
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例 3.24 产生 一 个 一行 王 列 的 行 归 一 化 随机 权 值 年 阵 。 
允 =randnr(3.3) 
风 = 
-0.1269 0.9680 -0.2164 
0.2265 0.4674 0.8545 
0.4840 -0.5367 0.6912 
参见 : randnc 肯 数 。 
6、Rands 
功能 ， 对 权 值 和 阀 值 进行 随机 初始 化 。 
格式 ， 
0 允 =rIands(S,PR) 
做 M=rands(S.R) 
@@ B=rands(S) 
说 明 ; 
输入 S 为 神经 无 个 数 ， 调 用 形式 @ 中 的 PR 为 表示 输入 失 量 取 值 范围 的 矩阵 fPmin 
pmax1， 调 用 形式 加 中 的 R 为 输入 矢量 的 维 数 。 调 用 形式 中 和 国都 可 以 返 癌 中 机 权 值 矩 
阵 ， 调 用 形式 @@ 返 回 疯 值 矢量 。 
例 3.25 产生 ' 个 三 行 兰 询 的 随机 权 值 托 阵 。 
W=rands(3,3) 
W= 
-0.6131 0.0833 -0.2433 
0.3644 -0.6983 0.7200 
-0.3945 0.3958 0.7073 
参见 ，randnr、randnc、initay 、initwh 和 init 钥 数 。 


3.2.6 “训练 和 自 适 应 调整 函数 
网 络 的 训练 和 白 适 应 调整 函数 如 表 3-7 所 示 。 
表 3-.7 训练 和 自 适 应 调整 函数 





己 






































冰 数 和 名称 功 能 
tainb 根据 已 设 定 的 权 值 和 阅 值 学 习 两 数 对 网 络 进行 批 最 训练 
taine 根据 已 设 定 的 权 值 和 贱 值 学 习 函 数 对 网 络 进行 锈 环 训练 
Hair 根据 已 设 定 的 权 值 科 什 学习 函 数 对 网 络 进行 随机 训练 
ains 根据 已 波 定 的 权 值 和 值 学 习 函数 对 网 络 进行 顺序 训练 
ainbr 采用 中叶 拓 正则 化 算法 对 网 络 进行 训练 
E 采用 BEGS 准 直 上 反 向 伟 搂 算法 对 网 络 进行 训练 
taiac 同 | 采用 Fowel-Beale 汇 频 机 度 反 向 传 括 算 法 对 网 络 进行 训练 
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续 表 
traincgtf 采用 Fletcher-Powell 共 辆 梯度 反 向 传播 算法 对 网 络 进行 训练 
traincgp 采用 Polak-Ribiere 上 共 竹 梯度 反 重 使 播 算 法 对 网 络 进行 训练 
trainscg 采用 尺度 化 共 轰 梯度 反 向 传播 算法 对 网 络 进行 训练 
traingd 采用 梯度 下 降 反 脐 合 播 算 法 对 网 络 进行 训练 
traingda 采用 自 适 应 学 习 速 府 梯 度 下 降 反 向 传播 算法 对 网 络 进行 训练 
traingdm 采用 动量 梯度 下降 反 向 传播 算法 对 网 络 进行 训练 
traingdx 采用 自 适应 学 习 速率 动量 梯度 下 降 反 向 会 播 算法 对 网 络 进行 训练 
trainlm 采用 Levenberg-Marguardt 反 向 传播 算法 对 网 络 进行 训练 
trainaoss 采用 一 步 正 割 反 向 传播 算法 对 网 络 进行 训练 
trainrp 采用 瘦 性 反 向 传播 算法 对 网 络 进行 训练 

表 3-7 中 的 函数 在 程序 中 不 被 直接 调用 ， 当 运行 adapt 和 train 国 数 对 网 络 进行 训练 





时 ，adapt 和 train 闻 数 将 根据 欧 络 的 白 适 应 调整 冰 数 属性 neLadaptFcn 和 训练 盟 数 导 性 
nettrainFcn 调用 相应 的 训练 函数 。 
1、，trainb 
功能 : 根据 已 设 定 的 权 值 禾 值 学 习 滑 数 对 网 络 进行 批量 训练 。 
格式 : 
全 [neb TR, Ac, El ] = trainb ( net Pd, TL Ai Q, TS,VV,TV) 
所 info =trainb (code ) 
说 明 : 
trainb 函数 实现 对 网 络 的 批量 式 训练 。 毛 谓 批 量 训 练 ， 是 指 网 络 在 接收 全 部 样本 矢量 
数据 后 ， 才 对 网 络 的 权 值 和 阔 值 进行 调整 。 当 训练 蚁 数 属性 net'trainFcn 为 ttrainb' 时 ， 网 络 
具有 以 下 训练 参数 ， 
下。 neLtrainParam.epochs;， 最 大 训练 次 数 ， 网 络 每 接收 一 轮 输 入 数据 并 进行 调整 称 为 
一 次 训练 ， 该 参数 的 缺 省 值 为 100; 
nettrainParam.goal:， 网 络 性 能 日 标 ， 缺 省 值 为 0; 
neLtrainParam.max_fail， 最 大 验证 失败 次 数 ， 缺 省 值 为 5; 
nettrainParam.show， 两 次 显示 之 间 的 训练 次 数 ， 缺 省 值 为 25 
nettrainFaramtime:， 最 长 训练 时 间 〔〈 以 秒 计 ?， 缺 省 值 为 inf。 
:网络 训练 过 程 中 ， 只 更 满 足 上 列 四 个 条 件 之 一 ， 网 络 训练 便 会 停止: 
达到 最 大 训练 次 数 nettrainParam.epochs: 
网 络 误差 性 能 降低 到 目标 值 nettrainParam.goal ; 
刘 练 时 间 达 到 最 大 值 nettrainParamtime; 
连续 验证 失败 次 数 达 到 最 大 次 数 nettrainParam.max_fail。 所 谓 验证 失败 ， 是 指 调 
整 后 的 网 络 对 验证 输入 矢量 的 输出 误差 没有 降低 。 
在 函数 的 调用 形式 个 中 ，Pd 为 延迟 输入 ;可 为 每 层 的 目标 矢量 ，Ai 为 初始 输入 条 
计件 ，Q 为 批量 输入 数据 的 个 数 ，TS 为 时 间 步 数 ，VV 为 验证 失 量 ; TV 为 测试 矢量 。 冰 数 
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返 岂 已 训练 好 的 神经 网 络 对 象 net、 训 练 记 录 TR 、 节 后 一 次 仿真 时 各 层 的 箱 出 Ac 利 误 养 
BE1， 其 中 ， 训 练 记 录 TR 包括 训练 次 数 TR.epoch、 训 练 性能 TR.perf、 验 证 性 能 TR.vperf 
和 测试 性 能 TR.tperf。 

盟 数 的 调用 形式 所 将 返 加 训练 函 数 的 有 关 信 息 ，eode 字符 趾 的 取 俏 为 : 

昌 。 'pnames': 返 问 训 练 参数 的 名 称 ， 

和 'pdefaults': 返 铝 训练 参数 的 缺 省 值 。 

网 络 属性 设置 

newlin 明 数 建立 的 网 络 采用 trainb 作为 训练 函数 ， 如 果 要 使 掉 定 义 网 络 利 用 trainb 肯 
数 进行 训练 ， 可 作 如 下 设置 : 

(D 将 网 络 训练 丙 数 net.rainFen 设置 为 trainh'; 

(2) 设置 网 络 训练 函数 的 参数 nettrainParam; 

(3) 设置 各 输入 权 人 但、 网 络 权 值 和 记 值 的 学 习 函 数 netinputWeights{fijjleamFcn、 
met.layerWeights{ij}.learnFcn 和 netbiases{i}-learnEFchn; 

(人 设置 各 权 值 和 阅 值 学 习 范 数 的 参数 netinputWeightsfijj-leamParam 、 
Pet.layerWeights{ijj.learnParam 和 netbiases{ij.learmParam 。 

参见 ，newp、hnewlin 和 train 因数 。 

2.， trainc 

功能 ， 根 据 已 设 定 的 权 值 和 疝 值 学 习 函 数 对 网 络 进行 循环 训练 。 

格式 ， 

人 [neb TR, Ac, El ] = trainc (net Pd, TL Ai Q,TS,VVTV) 

轩 info =trainc(code ) 

说 明 : 

traine 月 数 对 网 络 进行 循环 训练 。 所 谓 循环 训练 ， 是 指 网 络 每 接收 一 个 输入 数据 ， 都 
要 对 权 值 和 阔 值 进行 调整 ， 而 且 输 入 数据 是 以 循环 队列 的 形式 进行 排列 的 。 网 络 训练 函数 
属性 netrainFcn 为 trainc 时 ， 网 络 的 说 练 参数 包括 : 

昌 。 nettrainParam.epocbs: 最 大 训练 次 数 ， 网 络 每 接收 一 轮 输入 数据 并 进行 权 值 和 效 

仁 调 整 称 为 一 次 训练 ， 该 参数 缺 省 什 为 100; 

田 。 nettainParam.goal: 网 络 性 能 目标 ， 缺 省 值 为 0; 

旧 。 nettrainParam.show: 两 次 显示 之 间 的 调 练 次 数 ， 缺 省 值 为 25， 

和。 nettrainParam.time， 最 长 训练 时 间 〈 以 秒 计 )， 缺 省 债 为 inf。 

在 网 络 训练 过 程 中 ， 只 要 满足 下 列 三 个 条 件 之 一 ， 网 络 训练 便 会 停 赴 : 

和 田 。” 达 到 最 大 训练 次 数 neLtrainParam.epochs; 

时。 网 络 误差 忻 能 降低 到 日 标 值 nettrainParam.goal; 

晶 “训练 时 间 达 到 最 大 值 nettrainParanutime。 。 

traine 函数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 tainb 函数 。 函 数 输出 的 训练 记录 
了 TR 由 训练 次 数 TR.epoch 和 训练 性 能 TR.perf 组 成 。trainc 函数 在 训练 网 络 时 不 进行 验证 和 
测试 ， 因 此 调用 时 可 省 去 验证 矢量 VY 和 测试 失 量 TV 。 ; 














72 基于 MATLAB 6.x 的 系统 分 析 与 设计 一 神经 网 络 面 





网 络 属性 设置 ; 

newp 葬 数 建立 的 网 络 采用 traine 作为 训练 函数 ， 如 果 要 使 白 定 义 网 络 利用 trainc 函数 
进行 训练 ， 可 作 如 下 设置 : 

(D 将 网 络 训练 国 数 neLtrainFcn 设置 为 trainc'; 

人) 设置 网 络 训练 前 数 的 参数 net.tainParam; 

G) 设置 各 输入 权 值 、 网 络 权 值 和 阙 侦 的 学 习 函 数 netinputWeights{ijj-learnFcn 、 
net]layerWweights (ij}.learmFcn 和 metbiases{ij.learmmFcn: 

人 设置 各 入 值 和 阔 值 学 习 函 数 的 参数 netinputWeights{fijj.leamParam 、 
net,jayerWeights{ij .learmmParam 和 net.biasesfij.earnParam。 

参见 : newp、newlin 和 train 函数 。 


3 trainr 
功能 ;根据 已 设 定 的 权 值 和 阔 值 学 习 遂 数 对 网 络 进行 随 机 训练 。 
格式 ; 


个 [ net TR, Ac, El ] = trainr ( nct Pd Tl Ai Q,TS,VV, TV ) 

名 info =trainr ( code ) 

说 明 : 

trainr 函数 对 网 络 进 行 随机 训练 。 所 谓 随 机 训练 ， 是 指 网 络 每 楼 收 一 个 输入 数据 ， 部 要 
对 权 值 和 闪 值 进行 调整 ， 调 旦 输入 数据 是 以 随机 顺序 排列 的 。 当 网 络 训练 函数 的 属性 
netrainFcn 为 trainr 时 ， 网 络 的 训练 参数 和 训练 停止 条 件 与 traine 函数 相同 。 

trainr 丙 数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 tainb 函数 。 函 数 输 出 的 训练 记录 
TR 中 包括 训练 次 数 TR.epoch 和 训练 性 能 TR.perf。trainr 函数 在 训练 网 络 时 不 进行 验证 和 
测试 ， 因 此 调用 时 可 省 去 验证 矢量 YY 和 测试 矢量 TV。 

网 络 属性 设置 : 

newc 和 newsom 范 数 建立 的 网 络 寿 采用 trainr 作为 训练 本 数 ， 如 果 要 使 自 定义 网 络 利 
用 trainr 函数 进行 训练 ， 可 作 如 下 设置 : 

(D 将 网 络 的 训练 函数 nettrainFcn 设置 为 trainr: 

(2) 设置 网 络 训练 函数 的 参数 nettrainParam， 

(G) 设置 各 输入 权 值 、 网 络 权 值 和 病人 值 的 学 习 函 数 netinputWeights fijjleamFcn、 
metayerWeights{fij)j-leamFcn 和 netbiases{i}j.learnFcn: 

仙 设 置 各 权 值 和 浆 值 学 习 函 数 的 参数 hetinputWeights{fij}IearnParam 、 
netJayerWeights{ij}.learnParam 和 netbiasesfijlearmFaram。 

参见 : newc、newsom、newp、newlin 和 train 函数 。 














4.、trains 

功能 : 根据 已 设 定 的 权 值 和 阔 值 学 习 函 数 对 网 络 进行 顺序 训练 。 
格式 : 

加 [neb TR, Ac, EL] = tains (net Pd, Th Ai Q,TS,VVTV) 

@@ info =trains (code) 
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说 明 ， 

trains 圾 数 依据 已 设 定 的 权 值 和 旺 值 学 习 胃 数 对 网 络 进行 顺 序 训 练 。 所 谓 顺 序 训练 ， 
是 指 输 入 数据 按 排 询 顺 序 依 次 进入 网 络 ， 网 络 每 接收 一 个 输入 ， 就 对 私 值 和 网 值 进行 “次 
调整 。 该 咕 数 多 设置 为 网 络 的 白 适 应 调整 表 数 。 网络 的 自 适 应 调整 函数 属性 netadaptFcn 
为 trains 时 ， 网 络 的 白 适 应 调整 参数 为 : 

netadaptParam.passes: 上 昌 适 应 调整 次 数 。 网 络 接收 一 轮 输入 数据 后 并 对 权 值 和 阅 值 进 
行 更 新 称 为 一 次 调整 ， 该 参数 缺 省 值 为 1。 

当 网 络 训练 范 数 属性 nettrainFcn 为 trains' 时 ， 网 络 的 训练 参数 为 

nettrainParam.passes:; 训练 次 数 ， 缺 省 值 为 1。 

trains 昂 数 在 调用 时 各 输入 量 和 返回 基 的 含义 参见 trainb 函数 。 困 数 输出 的 训练 记录 
TR 山 网 络 训练 的 时 间 步 数 TRtimesteps 和 训练 性 能 TR.perf 两 项 组 成 。 

网 络 属性 设置 : 

newp 和 newlin 明 数 建立 的 网 络 都 采用 trains 苑 数 作 为 自 适应 测 整 闷 数 ， 如 果 要 使 日 定 
义 网 络 利用 trains 国 数 进行 调整 ， 可 作 如 下 设置 : 

(D 将 网 络 训练 咕 数 netadaptEcn 设置 为 'rains'; 

(人 2) 设置 网 络 训练 函数 的 参数 neLadaptParam; 

(3) 设置 各 输入 权 值 、 网 络 权 值 和 逆 值 的 学 习 函 数 netinputWeights{ijjlearnFen 、 
net.layerWeights {ijjJeamFcn 和 net.biasesfij.learmnFcn; 

(4) 设置 各 权 值 和 上 晃 值 学 习 通 数 的 参数 neLinputWeights{ijj.learmParam 、 
netayerWeights{fij}.learnParam 和 netbiases{ij.leamParam。 

参见 ，newp、newlin、trainb 、trainc 、trainr 和 train 前 数 。 

5 trainbr 

功能 :采用 贝 叶 斯 正则 化 算法 对 网 络 进行 训练 。 

格式 : 

@ [net,TR, Ac, El ] = trainbr ( neb Pd, TL Ai Q,TS,VV ITV) 

加 info=trainbr(code) 

说 明 : 

trainbr 函数 依据 Levenberg-Marquardt 优化 理论 对 网 络 的 权 值 和 阔 值 进行 调整 〈 参 驳 
trainlm 函数 )。 所 谓 Bayesian 正则 化 ， 是 指 为 了 提 商 网 络 的 推广 能 力 ， 训 练 过 程 中 要 建立 
一 个 由 各 层 输 出 误 痊 、 权 值 和 效 值 构成 的 特殊 性 能 参数 〈 该 参数 的 定义 类 似 于 规则 化 均 方 
误 准 函数 msereg)， 通 过 调整 权 值 和 效 值 ， 使 该 参数 最 小 化 。trainpr 函数 的 优点 在 于 可 以 
提 高 网 络 推广 能 力 ， 而 且 不 会 出 现 “过 度 训 练 ” 的 情况 。 当 网 络 输入 和 目标 矢量 的 取 值 为 
[1，9] 时 ，trainbr 函数 可 以 达到 最 好 的 工作 效果 ， 央 此 在 利用 trainbr 画 数 对 网 络 进行 计 练 
之 前 通常 应 预先 对 样本 数据 作 归 一 化 处 理 。 

当 网 络 的 训练 范 数 nettrainFcn 为 trainbr 时 ， 网 络 的 训练 参数 为 : 

下 net'trainParam.epochs:， 训练 次 数 ， 缺 省 值 为 100， 

。 nettrainParam.goal:; 网 络 性 能 目标 ， 缺 省 值 为 0; 

下 ”mettrainParam.mu: Marquardt 调整 参数 ， 缺 省 值 为 0.005; 
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nettrainParam .mu_dec: ma 的 下 降 因 子 ， 缺 省 值 为 0.1; 
nettrainParammu_inc: mu 的 上 升 因子， 缺 省 值 为 10; 
nettrainParam .mu_max: mu 的 最 大 值 ， 缺 省 值 为 1e-10; 
neLtrainParam .max_fail: 最 人 验证 失败 次 数 ， 缺 省 值 为 5; 
net.trainParam.mer_reduc: 该 参数 用 于 权衡 计算 雅 可 比 矩 阵 时 占用 的 内 存 空间 和 
计算 速度 ， 缺 省 值 为 1。 当 该 央 子 为 1 时 ， 计 算 时 占用 的 内 企 最 大 ， 但 计算 速度 
最 快 ， 当 该 因子 增 大 时 ， 计 算 时 占用 的 内 在 减 小 ， 但 计算 速度 也 随 之 减 慢 ， 
@。 mettrainParam.min_grad: 性 能 函数 的 最 小 习 度 ， 缺 省 值 为 1e-10; 
时 nettrainParam.show: 两 次 显示 之 癌 的 训练 次 数 ， 缺 省 值 为 25; 

nettrainParam .time， 最 长 训练 时 间 《〈 以 秒 计 )， 缺 省 值 为 inf 
在 网 络 训练 过 程 中 ， 只 要 满足 上 列 六 个 条 件 之 一 ， 网 络 训练 使 会 停止 : 
达到 最 大 训练 次 数 net.trainParam.epochs; 
网 络 误差 性 能 降低 到 有 目标 值 nettrainParam.goal; 
训练 时 间 达 到 最 大 值 nettrainParam.time; 
性 能 函数 梯度 降低 到 最 小 梯度 neLtrainParam.min_grad; 
调整 参数 mu 达到 最 大 值 nettrainParam.mu_maxs 
连续 验证 失败 次 数 达 到 最 大 次 数 nettrainParam.max_fail。 

trainbr 函数 在 调用 时 各 输入 量 和 返回 量 参见 trainb 顺 数 。 青 数 输出 的 训练 记录 TR 由 
训练 次 数 TR.epoch、 网 络 训练 性 能 TR.pedf、 验 证 性 能 TR.vperdf、 测 试 性 能 TR.tperf 和 自 适 
应 调整 参数 TR.mu 组 成 。 


网 络 属性 设置 : 


newff、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采用 trainbr 表 数 作为 训练 函数 。 只 要 
网 络 的 加 权 上 国 数 、 输 入 北 数 和 传递 函数 是 可 微 的 ， 堵 么 该 网 络 就 可 以 利用 trainbr 函数 进行 
训练 ， 如 果 要 使 网 络 利用 trainbr 函数 进行 如 练 ， 串 作 如 下 设置 : 

(D 将 网 络 训练 函数 net, trainFcn 设置 为 trainbr; 

(2) 设置 网 络 训练 函数 的 参数 net.tainParam。 

参见 : newff、newcf、newelm 、traingdm 、 aingda 、 taingdx 、trainlm 、 (trainrp 、 
traincgf、traincgb 、trainscg、traincgp 和 trainoss 函数 。 

6.、trainbfg 

功能 : 采用 BFGS 准 和 牛顿 反 向 传播 算法 对 网 络 进行 训练 。 

格式 ， 

@ [aet,TR, Ac, EL] = trainbfg ( net Pd Tb Ai Q,TS,VV TV ) 

人 info=trainbfg (code ) 

说 明 : 

trainbfg 函数 依据 BFGS 淮 牛 帧 反 向 传播 算法 对 网 络 的 权 值 和 闭 信 进行 调整 ， 该 算法 收 





























:化 较 恢 ， 但 由 用 的 内 存 比 共 范 梯 度 算法 要 大 ， 因 此 适用 了 丁 小 规模 网 络 。 








trainbfg 函数 以 及 其 他 一 些 采 用 准 牛 避 算 法 和 具 肛 梯 度 算法 的 训练 函数 都 要 使 用 线 搜索 








; 函数 ， 因 此 当 网 络 的 训练 函数 nettrainFen 设 为 此 类 函数 时 ， 网 络 的 训练 参数 将 由 常规 参数 
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索 参 数组 成 ， 其 中 常规 参数 包括 : 
nettrainParam.epochs， 训 练 次 数 ， 缺 省 值 为 109; 
nettrainParam.goal: 网 络 性 能 目标 ， 缺 省 值 为 0; 
nettainParam .max_fail， 最 大 验证 失败 次 数 ， 缺 省 值 为 $; 
nettrainParam.min_grad: 性 能 函数 的 最 小 梯度 ， 缺 省 值 为 le-6; 
nettrainParam.show: 了 欧 次 显示 之 加 的 训练 次 数 ， 缺 省 值 为 25; 
neLtrainParam ,time 最 长 训练 时 间 《〈 以 秒 计 )， 缺 省 值 为 inf。 

接 索 参数 包括 ; 
nettrainParam.seafrchFcn， 训练 时 采用 的 线 搜索 方法 ， 缺 省 值 为 'srchcha'; 
netLtainParam ,scal_ tol， 定 线 搜索 误差 的 尺度 因子 ， 缺 省 值 为 20， 训 始 步 长 
delta 除 以 该 参数 语 得 到 线 搜索 结果 的 误差 ， 
nettrainParam .alpha: 傅 定 性 能 函 数 下 降 是 否 症 够 人 的 尺度 内 子 ， 缺 省 值 为 
0.001; 
nettrainParam.beta， 确定 步 长 是 否 是 够 大 的 尺度 因子 ， 缺 省 值 为 0.1; 
nettrainParam.delta: 区间 定位 时 的 初始 步 长 ， 缺 省 值 为 0.01 : 
nettrainParam.gama， 避免 性 能 印 数 下 降 过 小 的 参数 ， 缺 省 值 为 0.1 : 
nettrainParam .low_lim: 步 长 变化 下 界 ， 缺 省 值 为 0.1; 
ncttrainParam.up_lim， 步 长 变化 上 界 ， 缺 省 值 为 0.5， 
nettrainParam maxstep: 最 大 步 长 ， 缺 省 值 为 100: 
nettrainParamminstep: 最 小 步 长 ， 缺 省 值 为 1.0e-6， 
nettrainParam bmax: 最 大 步 长 〈 与 maxstep 在 不 同 捷 索 算法 中 分 别 使 用 )， 缺 省 
值 为 26。 

网 络 训练 过 程 中 ， 只 要 满足 王 列 五 个 条 件 之 一 ， 网 络 训练 便 会 停止: 
达到 最 大 训练 次 数 nettrainParam.epochs; 
网 络 误 益 性 能 降低 到 目标 值 net.tainParam ,goal; 
训练 时 间 达 到 最 大 值 nettrainParam.time: 
性 能 纲 数 梯度 降低 到 最 小 值 neLtrainParam min_grad; 
连续 验证 拓 败 次 数 超过 最 大 次 数 nettrainParam,max_fail。 














trainbfg 函数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 trainb 函数 。 


网 
De 
网 络 的 
行 训练 


络 属 性 设置 ; 

w 人 f、newcf 和 newelm 汗 数 建立 的 网 络 都 可 以 采用 trainbfg 孙 数 作为 训练 函数 。 只 要 
加 权 函 数 、 输 入 函数 和 传递 函数 足 可 微 的 ， 那 么 该 网 络 就 可 以 利用 trainbfg 郑 数 进 
， 邵 果 要 使 网 络 利 用 该 冰 数 进行 训练 ， 可 作 如 下 设置 : 


(0 将 网 络 训练 困 数 net trainFcn 设置 为 frainbfg'; 
(2) 设置 网 络 训练 数 的 大 数 nettrainParam。 


参 


见 :new 和 在 、newcf 、newelm 、traingdm 、traingda 、traingdx 、trainlm 、 trainrp 、 


traincgf、traincgb 、trainscg、traincgp 和 trainoss 阔 数 。 
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7 了 7. traincgb 
功能 : 采用 Powel-Beale 具 辆 梯 诬 反 加 传播 算法 对 网 络 进行 训 练 。 
格式 : 


0 [ne TR, Ac, El ] = traincgb ( net Pd, TU AiQ,TS,VV TV) 

的 info = traincgb (code) 

说 明 : 

traincgb、traincgf、traincgp 和 tainscg 郧 数 都 是 依据 共 辆 梯 度 友 问 传播 算法 对 网 络 的 
权 估 和 疯 什 进行 调整 的 。 在 县 印 梯度 算法 中 ， 网 络 参数 不 是 沿 性 能 曲 上 面 的 包 速 下 降 方 各 

( 负 梯 度 方向 ) 进行 调整 的 ， 谭 是 沿 先前 调整 方向 的 苍 方向 进行 调整 的 ， 这 种 方法 可 以 

加 快 网 络 的 收 化 速度。 共和 角 梯 度 算法 速度 快 ， 占 用 内 存 少 ， 央 此 适用 十 大 规模 的 神经 网 
络 ， 在 共 生 梯 度 算法 中 ， 调 整 方向 更 周 期 性 地 重新 设置 为 性 能 曲面 上 当前 点 的 负 梯 度 ， 
traincgb 疯 数 采用 Powell-Beale 方法 确定 网 络 训 练 过 程 中 何 时 进行 这 种 设置 。 

当 网 络 训练 明 数 为 trainegb 时 ， 网 络 的 训练 参数 和 停 小 条 侍 与 trainbfg 胃 数 的 机 问 。 
traincgb 明 数 在 调用 时 各 输入 量 和 返 癌 量 的 含义 参见 函数 trainb。 

网 络 扁 性 设置 : 


newff、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采用 traincgb 函数 作为 训练 晒 数 。 只 
此 网 络 的 加 权 上 打数 、 输 入 冰 数 和 传递 函数 是 本 微 的 ， 那 么 该 网 络 就 可 以 利用 traincgb 半数 
进行 训练 ， 如 果 要 使 网 络 利用 该 函数 进行 训练 ， 可 作 如 下 设置 ， 

(D 将 网 络 训练 函数 net. rainFcn 设置 为 traincgb'， 

(2) 设置 网 络 训练 函数 的 参数 nettrainParam。 

参见 :， newff 、newcf 、newelm 、traingdm 、traingda 、 traingdx 、trainlm 、traimrp 、 
traincgf、tainscg、traincgp、trainbfg 和 trainoss 函数 。 

8、traincgf 

功能 ， 采 用 Fletcher-Powell 共 连 梯度 反 向 传播 算法 对 网 络 进行 训练 。 

格式 : 

全 [net, TR, Ac, El ] = traincgf (net Pd.TL AllQ,TS,VV TV) 

加 info = traincgf ( code ) 

说 明 ， 

traincgf 遂 数 是 此 辑 梯 度 算法 的 一 种 变形 。 当 网 络 训练 函数 为 raincgf 时 ， 网 络 的 训练 
参数 和 停止 条 件 避 rrainbfg 函数 相交。 

traincgf 郴 数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 函数 tainb。 

网 络 属 性 设置 : 

newff、newcf 和 newelm 曙 数 建立 的 网 络 都 可 以 采用 traincgf 函数 作为 刘 练 函数 。 只 要 
阅 络 的 加 权 闭 数 、 输 入 函数 和 传递 函数 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 traincgf 函数 进 
行 调 练 ， 如 妆 要 使 网 络 利用 该 函数 进行 刘 练 ， 可 作 如 下 设置 : 

4) 将 网 络 训练 斤 数 net, trainFcn 设置 为 traincgP， 

(2) 设置 网 络 训练 的 数 的 参数 nettrainParam 。 














少 
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奏 见 :new 入 、newcf、mnewelm 、traingdm 、traingda 、traingdx 、trainlm 、trainm 、 
traincgb 、trainscg、traincgp、trainbfg 和 trainoss 闲 数 。 

9、，traincgp 

功能 : 采用 Polak-Ribiere 共 辆 梯度 反 向 传播 算法 对 网 络 进行 训 练 。 

格式 : 

CD fnet, TR, Ac, El ] = traincgp (neb Pd TL AiQ,TS,VVTV) 

四 info = traincgp (code) 

说 明 : 

traincgp 散 数 是 基 生 梯 度 算法 的 一 种 变形 。 汉 网 络 训 练 哆 数 为 trainegp 时 ， 网 络 的 训练 
参数 和 停止 条 件 与 trainbfg 甬 数 相间 。 

traincgp 函数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 半数 trainb。 

网 络 属性 设置 : 

newff、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采 川 traincgp 上 数 作为 训练 凋 数 。 欠 
费 网 络 的 加 权 驮 数 、 输 入 函数 和 传递 函数 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 traincgp 明 数 
进行 训练 ， 如 果皮 使 网 络 利 用 该 前 数 进行 训练 ， 可 作 如 下 设置 : 

(D 将 网 络 训练 肯 数 nettrainFcn 设置 为 "tiincgp': 

(C) 设置 网 络 训练 函数 的 参数 nettrainParam。 

参见 : new 人 和 f、newcf 、newelm 、ftraingdm 、traingda 、traingdx 、trainlm 、 trainrp 、 
traincgb、trainscg，traincgf、trainbfg 和 trainoss 明 数 。 

10，trainscg 

功能 ;采用 只 度 化 琴 连 梯度 反 向 传播 算法 对 网 络 进行 训练 。 

格式 : 

人 [net, TR, Ac, El ] = trainscg ( net Pd, Tb Ai Q. TS,VVTV) 

@@ info =trainscg (code) 

说 明 : 

trainscg 函数 是 共 杷 梯度 算法 的 一 种 变形 ， 该 算法 结合 了 Levenberg-Marquardt 算法 中 
的 模型 置信 区 间 方 法 和 共 罗 梯 度 算法 ， 避 免 了 耗 时 巨大 的 线 搜索 过 程 ， 从 而 提高 了 网 络 的 
训练 速度 。 半 网 络 训练 函数 为 tainscg 时 ， 网 络 的 训练 参数 为 ; 

和 nettitainParam.epochs: 训练 次 数 ， 缺 省 值 为 100; 
nettrainParam.goal;， 网 络 性 能 日 标 ， 缺 省 值 为 0; 
nettainParam.max_fail， 最 大 验证 失败 次 数 ， 缺 省 值 为 5 
nettrainParam.min_grad:， 性 能 函数 的 最 小 梯度 ， 缺 省 值 为 te-6: 
nettrainpParam.show: 两 次 显示 之 问 的 训练 次 数 ， 缺 省 值 为 25; 
nettrainParam time:， 最 长 训练 时 间 〈 以 秒 计 )， 缺 省 值 为 mnf; 
nettrainParam sigma: 用 十 二 阶 导 数 逼 近 的 权 值 灾 化 参数 ， 侧 省 值 为 .5.0e 5; 
nettrainParam lambda，JHessian 矩阵 不 确定 性 的 调整 参数 ， 缺 省 值 为 50e-7。 
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此 时 网 络 训练 的 停止 条 件 与 明 数 trainbfg 的 胡同。 
trainscg 明 数 在 调用 时 各 输入 量 和 返 同 量 的 含义 参见 效 数 trainb。 
网 络 属性 设置 : 


new 他 、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采用 trainscg 函数 作为 训练 男 数 。 只 要 
网 络 的 加 权 函 数 、 输 入 吨 数 和 传递 数 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 trainscg 男 数 进 
行 训练 。 如 果 要 使 网 络 利用 trainscg 郑 数 进行 训练 ， 可 作 如 下 设置 : 

{D 将 网 络 训练 旺 数 net. trainFcn 设置 为 trainscg': 

(2) 设置 网 络 训 练 明 数 的 参数 nettrainParam 。 

参见 : newff、newcf 、newelm 、traingdm 、 traingda 、traingdx 、 trainitm 、trainrp 、 
traincgb、traincgf、traincgp 、traiabfg 和 trainoss 函数 





11，traingd 

功能 : 采用 由 度 上 降 反 向 传播 算法 对 网 络 进行 训练 ， 

格式 : 

个 [neb TR, Ac, El ] = traingd (net Pd, Tl Ai Q, TS,VV,TV) 

人 info = traingdtf code) 

说 明 : 

traingd 晒 数 实现 了 最 莫 本 的 最 速 梯度 下 降 算法 ， 即 基本 BP 算法 ， 其 他 梯度 下降 算法 
都 是 该 算法 的 变形 。 当 网 络 训练 函数 为 traingd 时 ， 网 络 的 训练 参数 为 : 

上 四 nettrainParam.epechs， 训 练 次 数 ， 缺 省 值 为 100: 
nettrainParam-.goal， 网 络 忻 能 日 标 ， 缺 省 值 为 0; 
nettrainParam.jr;， 学 习 速率 ， 缺 省 值 为 0.01; 
nelLtrainParam.max_fail: 最 大 验证 失败 次 数 ， 缺 省 值 为 $; 
mettrainParam.min_grad: 性 能 绷 数 的 最 小 梯度 ， 缺 省 值 为 le-10; 
nettrainParam.show， 两 次 显示 之 间 的 训练 次 数 ， 缺 省 值 为 25: 

和。 nettainParam time， 最 长 训练 时 间 〔 以 秘 计 )， 缺 省 值 为 inf。 
此 时 网 络 训练 的 停止 条 件 与 函数 trainbfg 的 相同 。 

traingd 函数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 六 数 trainb。 

网 络 属性 设置 ， 、 

new 人 ff 、newcf 和 newelm 通 数 建立 的 网 络 都 可 以 采用 traingd 函数 作为 训练 函数 。 只 
要 网络 的 加 权 毅 数 、 输 入 函数 和 传递 函数 足 可 微 的 ， 那 么 该 网 络 就 可 以 利用 -traingd 冰 数 进 
行 训练 。 如 果 要 使 息 定 义 网 络 利用 traingd 函数 进行 调 练 ， 可 作 如 下 设置 ， 
(1D 将 网 络 训练 函数 net, trainFcn 设置 为 traingd'; 四 
(2) 设置 网 络 训练 函数 的 参数 nettraipParam。 ， 
参见 ， newff、newcf、newelm、traingdm 、traingda、traingdx 和 ,trainlm 酌 数 。 
12.，traingda ， 
功能 : 采用 自 适应 学 习 速率 梯度 下 降 反 向 传播 算法 对 网 络 进行 训练 . 
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格式 : 
人 [net TR, Ac, El ] = traingqa ( net Pd, TH Ai Q,TS,VVTV) 
加 info =traingda(code ) 
说 明 : 
traingda 胃 数 是 最 速 赔 度 下 降 算 法 的 一 种 变形 ， 出 于 网 络 的 性 能 对 学 习 速率 十 分 敏 
志 此 该 数 在 网 络 训练 过 程 中 对 学 习 速率 进行 日 适应 调整 ， 从 而 提 珊 了 网 络 的 训练 效 
。 当 网 络 训练 着 数 为 raingda 时 ， 阅 络 的 训练 参数 为 : 
nettrainParam.epochs:， 训练 次 数 ， 缺 省 值 为 100; 
nettrainParam.goal; 网 络 性 能 口 标 ， 缺 省 值 为 0: 
netLtrainParam.ir， 学习 速率 ， 缺 省 值 为 0.01; 
nettrainParam.ir_inc: 学 习 速 率 增长 比例 因子 ， 缺 省 值 为 1.05; 
nettrainParam.lr_dec， 学 习 速 率 下 降 比 例 内 子 ， 缺 省 值 为 0.7: 
nettrainParam.max_fail， 最 人 验 让 失败 次 数 ， 缺 省 值 为 5， 
nettrainParam.max_perf_inc， 人 性 能 参数 最 大 增长 值 ， 缺 省 值 为 1.04; 
nettrainParam.min_grad: 性 能 函数 的 最 小 梯度 ， 缺 省 值 为 le-10; 
nettrainParam.show， 两 次 显示 之 问 的 训练 次 数 ， 缺 省 值 为 25; 

昌 。 nettrainParam.time， 最 长 训练 时 间 〈 以 秒 计 )， 缺 省 值 为 inf。 
此 时 网 络 训练 的 停止 条 件 和 函数 trainbfg 的 相同 。 

traingda 函数 企 调用 时 各 输入 量 和 返 旧 量 的 含义 参见 函数 trainb。 函 数 输出 的 训练 记录 
巾 训练 次 数 TR.epoch、 训 练 性 能 TR.perf、 验 证 性 能 TR.vper、 测 试 性 能 TRtpert 和 自 适 应 
学 习 速率 TR.r 组 成 。 

网 络 属性 设置 : 


newff、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采用 traingda 函数 作为 训练 函数 。 具 
归 网 络 的 加 权 阔 数 、 输 入 函数 和 传递 函数 都 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 traingda 冰 
数 进行 训练 。 如 果 此 使 网 络 利用 traingda 闻 数 进行 训练 ， 可 作 如 下 设置 : 

(1) 将 网 络 训练 函数 net. trainFcn 设置 为 traingda'; 

(2) 设 咒 网 络 训练 函数 的 参数 nettrainParam。 

参见 ，newff、newcf、newelm、traingdm、traingd、traingdx 和 trainlm 男 数 。 

13. traingdm 

功能 ， 采 用 动量 梯度 下 降 反 向 传播 算法 对 网 络 进行 训练 。 

格式 : 

全 [net TR, Ac, E 上 = traingdm ( net Pd, Ti Ai,Q， TS,VV TV ) 

国 info =traingdm ( code) 

说 明 : j 
traingdm 函数 是 最 速 梯度 下 降 算 法 的 一 种 变形 ， 该 该 鸭 数 在 对 权 值 和 阀 值 更 新 时 不 仅 考 ; 
虐 当 前 的 梯度 方向 ， 而 且 还 考虑 了 前 一 时 刻 的 梯度 方向 ， 从 而 降低 了 网 络 性 能 对 参数 调整 ; 
的 秆 感性 ， 有 效 地 抑制 了 局 部 极 小 ， 这 种 调整 方式 四 通过 设置 动 最 因子 来 实现 的 。 当 网 络 ; 
训练 函数 为 raingdm 时 ， 网 络 的 训练 参数 为 : ; 
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nettrainParam-.epochs， 训练 次 数 ， 缺 省 值 为 100， 
nettrainParam.goal， 网 络 性 能 日 标 ， 缺 省 值 为 0; 
nettrainParamlr， 学 习 速率 ， 缺 省 值 为 0.01; 
nettrainParam.max_fail， 最 人 验证 失败 次 数 ， 缺 省 倘 为 S， 
PettrainParam.mc:- 动量 常数 ， 缺 省 值 为 0.9; 
nettrainParam.min. grad: 性 能 函数 的 最 小 梯度 ， 缺 省 值 为 le-10; 
nettrainParam.show:， 了 次 显示 之 间 的 训练 次 数 ， 缺 省 信 为 25; 

昌 。 nettrainParam'time， 最 长 训练 时 间 〈 以 秒 计 )， 缺 省 倘 为 inf。 
此 时 网 络 训练 的 停 赴 条 件 与 明 数 trainbfg 的 相同 。 

traingdm 函数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 抽 数 tainb。 

网 络 属性 设置 ， 

new 任 、newcf 和 newelm 冰 数 建立 的 网 络 者 可 以 采用 traingdm 函数 作为 训练 盟 数 。 只 
旧 网 络 的 加 权 的 数 、 输 入 函数 和 传递 地 数 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 traingdm 函数 
进行 训练 。 如 果 驳 使 网 络 利用 traingdm 函数 进行 训练 ， 可 作 如 下 设置 : 

(将 网 络 训练 函数 net trainFcn 设置 为 raingdm'; 

(2) 届 兽 网 络 训练 函数 的 参数 nettrainParam。 

参见 ，newff、newcf、newelm、traingd、traingda、traingdx 和 trainim 上 蚌 数 。 

14，traingdx 

功能 ， 采 用 自 适 应 学 习 速率 动量 梯度 下 降 反 向 传播 算法 对 网 络 进行 训练 

格式 : 

CD [net TR, Ac, El ] = taingdx ( net, P4, Tl， AiQ,TS,VVTV) 

也 info = traingdx (code ) 

说 明 : 

traingdx 通 数 结合 了 动量 梯度 下 降 算法 和 自 适 应 学 习 速率 梯度 下 降 算法 ， 从 而 使 网 络 
的 调 练 速度 和 稳定 性 有 了 进一步 所 高 。 当 网 络 训练 函 数 为 traingdx 时 ， 网 络 的 训练 参 
数 为 ; 


蚤 














nettrainParam.epochs， 训练 次 数 ， 缺 省 值 为 100; 
nettrainParam.goal， 网 络 性 能 目 栎 ， 缺 省 信 为 0， 
nettrainParamir: 学 习 速 率 ， 缺 省 值 为 0.01; 
nebtrainParam.lr_inc: 学 习 速 率 增长 比例 因子 ， 缺 省 值 为 105* 
nettrainParamlr_dec: 学 习 速率 下 降 比例 因子 ， 缺 省 值 为 0.7: 
nettrainparammax_fail， 最 火 验证 失败 次 数 ， 缺 省 值 为 5; 
nettrainParam.max_perf_inc， 性 能 参数 最 人 增长 值 ， 缺 省 值 为 1.04; 
nettrainParam.mc， 动量 常 数 ， 缺 省 值 为 0.9: 
neLtrainParam.min_grad; 性 能 通 数 的 最 小 梯度 ， 缺 省 值 为 le-10: 
nettrainParam.show: 酚 次 显示 之 间 的 训练 次 数 ， 缺 省 值 为 25; 
和 hettainParam.time: 最 长 训练 时 间 《〈 以 秒 计 )， 缺 省 值 为 mnf。 

: 此 时 网 络 训练 的 停 让 条 件 与 函数 trainbfg 的 相同 。 


才 
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traingdx 晤 数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 函数 rainb。 函 数 输出 的 训练 记录 
由 训练 次 数 TR.epoch、 训 练 性 能 TR.perf、 验 证 性 能 TR.vperf、 测 试 性 能 TR.tpert 和 白 适 应 
学 习 速 率 TR.IT 组 成 。 

网 络 属性 设置 ; 


newff、newcf 和 newelm 国 数 建立 的 网 络 孝 可 以 采用 traingdx 通 数 作 为 训练 函数 。 只 
昌 网 络 的 加 权 胃 数 、 和 输入 男 数 和 传递 关 数 是 可 微 的 ， 那 么 该 网 络 都 可 以 利用 traingdx 通 数 
进行 训练。 如 果 要 使 网 络 利 几 traingdx 函数 进行 训练 ， 可 作 如 下 设置 : 

(D 将 网 络 训练 为 数 net. trainFcn 设置 为 "traingdx'; 

(2) 设置 网 络 训练 函数 的 参数 nettrainParam。 

参见 : newff、newcf、newelm、traingd、traingda、traingdm 和 trainlm 水 数 。 

15，trainlm 

功能 : 采用 Levenberg-Marquardt 反 认 传 播 算法 对 网 络 进行 训练 。 

格式 : 

们 [net TR. Ac,. E1] = trainlm (net. Pd, TL AiQ,TS,VV,TV) 

回 info=trainlm (code) 

说 明 : 

trainlm 冰 数 依据 Levenberg-Marquardt 优化 理论 对 网 络 的 权 值 和 岗 值 进行 调整 ， 沼 采 
用 trainlm 作为 调 练 范 数 时 ， 网 络 的 训练 参数 与 函数 trainbr 的 相同 ， 其 中 ， 训 练 参数 mu 决 
定 了 学 习 算 法 的 性 质 ， 若 mu 较 大 ， 学 习 过 程 主要 依据 梯度 下 降 法 ， 若 mu 较 小 ， 学 习 过 
程 主 要 依据 牛 辆 法 。 该 训练 胃 数 的 效率 优 十 最 速 下 降 法 ， 但 占用 内 存 较 大 ， 为 了 节省 内 
存 ， 可 以 把 训练 参数 中 的 nettrainFaram.mem_reduc 设置 为 2 或 更 大 的 值 。 网 络 训练 停 小 条 
件 也 与 函数 eainbr 相同 。 

trainim 冰 数 在 调用 时 各 输入 量 和 返回 量 的 的 含义 参见 trainb 函数 。 通 数 输出 的 训练 记 
录 TR 出 训练 次 数 TR.epoch、 训 练 性 能 TR.pedE、 验 证 性 能 TR.vperf、 测 试 性 能 TR.tperf 和 
白 适 应 调整 参数 TR.mu 组 成 。 

网 络 属性 设置 : 

newff、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采用 trainlm 咀 数 作为 训练 通 数 。 内 要 
网 络 的 加 权 尊 数 、 输 入 函数 和 传递 函数 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 trainlm 函数 进行 
训练 。 如 果 健 使 网 络 利 用 trainlm 函数 进行 调 练 ， 可 作 如 下 设置 ， 

(D) 将 网 络 训练 函数 net, trainFcn 设置 为 trainlm'; 

人 2) 设置 网 络 训练 函数 的 参数 netLtrainParam 。 

参见 : newff 、newcf 、newelm 、traingdm 、 traingda 、 traingdx 、 trainbr 、trainrp 、 
traincgf、traincgb、trainscg 、traincgp 和 trainoss 函数 。 


16、trainoss 
功能 : 采用 一 步 正 割 反 向 传播 算法 对 网 络 进行 训练 。 
格式 ; 


人 fnet TR, Ac, El] = trainoss ( net Pd, Tl, Al Q,TS,VV, TY) 
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加 info = trainoss (code ) 

说 明 : 

trainoss 函数 依据 一 步 正 割 反 加 传播 算法 对 网 络 的 权 值 和 交 俏 进行 调整 ， 该 函数 是 - 种 
准 牛顿 算法 。trainoss 两 数 占 用 的 内 存 比 共生 梯 度 算 法 大 ， 但 却 小 十 BFGS 算法 〈 参 见 
trainbfg 函数 )， 因 此 可 以 认为 是 两 者 的 折 变 。 当 网 络 训练 函数 为 trainoss 时 ， 网 络 的 训练 
参数 和 训练 停止 条 件 与 rainptg 函数 相 同 。 

trainoss 函数 在 调用 时 所 涉及 参数 的 含义 参见 trainb 函数 。 

网 络 属性 设置 ; 


new 任 、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采用 trainoss 函数 作为 训练 消 数 。 只 要 
网 络 的 加 权 函 数 、 输 入 函数 和 传递 函数 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 trainoss 函数 进 
行 训练 ， 如 果 要 使 网 络 利用 trainoss 函数 进行 训练 ， 可 作 如 下 设置 ， 

(D 将 网 络 训练 项 数 net. trainFcn 设置 为 trainoss' 

(2) 设置 网 络 训练 前 数 的 参数 nettrainParam 。 

参见 : new 人 f、newcf 、newelm 、traingdm 、traingda 、traingdx 、trainlm 、 trainrp 、 
traincgf、traincgb 、trainscg、traincgp 和 trainbfg 两 数 。 











17，trainrp 
功能 : 采用 弹性 反 向 传播 算法 对 网 络 进行 训练 。 
格式 ， 


介 [net TR, Ac, El ] = trainrp ( aet Pd TL Ai Q, TS,VV, TV ) 

人 info = trainrp (code ) 

说 明 : 

trainmp 鹃 数 依据 弹性 反 闪 传播 算法 对 网 络 的 权 值 和 阔 值 进行 调整 ， 该 函数 在 对 权 值 和 
疯 值 更 新 时 只 考虑 梯度 的 符 续 ， 调 整 幅 度 则 由 程序 设 定 ， 从 谭 提 高 了 网 络 在 性 能 曲面 平地 
区 域 的 学 习 效率 。 

当 网 络 训练 函数 为 rainrp 时 ， 网 络 的 训练 参数 为 : 

到 net.trainParam.epochs: 训练 次 数 ， 缺 省 值 为 100; 
nettrainParam.goal， 网 络 性 能 目标 ， 缺 省 值 为 0; 
nettrainParam.lr: 学 习 速率 ， 缺 省 值 为 0.01; 
nettrainParam.max_fail， 最 大 验证 失败 次 数 ， 缺 省 值 为 S; 
nettrainParam.min_grad， 性 能 函数 的 最 小 梯 境 ， 缺 省 值 为 le 6: 
neLtrainParam.show: 两 次 显示 之 问 的 训练 次 数 ， 缺 省 值 为 25; 
nettrainParam.time: 最 长 训练 时 间 〈 以 秒 计 )， 缺 省 值 为 inf 
neLuainParamdelt_inc: 权 值 变化 增加 量 ， 缺 省 值 为 1.2， 
nettraiaParam.delt_dec: 权 值 安 化 减少 量 ， 缺 省 值 为 0.5; 
nettrainParam.delta0:， 初始 权 值 变化 量 ， 缺 省 值 为 0.07; 

; 昌 。 nettrainParam,deltamax: 报 大 权 值 变化 量 ， 缺 省 值 为 50.0。 
} 网 络 训练 的 停止 条 件 与 rainbfg 函数 的 相 回 。 

: trainrp 函数 在 调用 时 各 输入 量 和 返回 量 的 含义 参见 trainb 函数 。 
地 











回 第 三 章 基于 MATLAB 6.x 的 神经 网 络 设计 与 分 析 83 


网 络 属性 设置 ; 

new 伍 、newcf 和 newelm 函数 建立 的 网 络 都 可 以 采用 trainrm 函数 作为 训练 函数 。 只 要 
网 络 的 加 权 阔 数 、 输 入 函数 和 传递 函数 是 可 微 的 ， 那 么 该 网 络 就 可 以 利用 tainrp 画 数 进行 
训练 。 如 果 要 使 网 络 利用 trainrp 函数 进行 训练 ， 可 作 如 下 设置 : 

(D) 将 网 络 训练 画 数 net, trainFcn 设置 为 'rainrp': 

(2) 设 署 网 络 训练 函数 的 参数 nettraipParam。 

参见 : newff、newcf 、newelm 、traingdm 、traingda 、traingdx 、trainlm 、trainoss 、 
traincgf、traincgb、trainscg 、traincgp 和 trainbfg 更 数 。 


3.2.7 学 习 函 数 
网 络 权 信 和 网 值 的 学 习 通 数 如 表 3.8 所 示 。 这 些 函 数 在 程序 中 不 被 直接 调用 ， 当 网 络 






























































利用 肯 数 tainb、traine、trainr 和 trains 进行 如 练 时 ， 这 些 训练 函数 将 根据 已 经 设置 好 的 权 
值 和 疯 值 学 习 函 数 的 属性 调用 相应 的 学 习 函 数 。 
表 3-8 学 习 函 ` 数 
函数 名称 功 能 
leamcon 公平 阔 值 学 习 函 数 
leamgd 梯度 下 降 权 值 和 效 值 学 习 函 数 
1 eamsam 动员 风 度 下 降 权 值 和 说 值 学 习 明 孝 
leamb Hebb 权 值 学 习 两 数 
leamhd 退化 Hebb 权 值 学 习 率 
lcamis 旦 内 权 值 学 习 栅 数 
learnk Kohonen 权 值 学 习 函 数 
learnlvL LVQ1 权 值 学 习 斋 数 
leamlv2 LVQ2 权 值 学 习 函 数 
leamos 星 外 权 值 学 习 函 数 
leamp 感知 器 权 值 和 浆 值 学 习 函 数 
tearnpn 归 化 感知 岩 权 值 和 阔 值 学 习 溯 数 
learnsom 自 组 织 映 射 网 络 权 值 学 习 冰 数 
| Jeamwh Widrow-Hoff 权 值 和 赋值 学 习 函 数 
1，jlearncon 
功能 ;公平 竟 信 学 习 函 数 。 
格式 : 


四 [dB,LS1= leamcon (B,PZ,N,A,T BE,gW,gA,D,LPLS) 
全 info = learncon (code ) 





saysaaaaasas 
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说 明 ， 
leamcon 函数 是 一 种 阅 值 学 习 函 数 ， 常 用 于 调整 竞争 层 网 络 中 神经 苑 的 阔 值 ， 该 罗 数 
通过 建立 一 个 公正 参数 ， 以 保证 小 输出 神经 元 的 阔 值 人 幅度 增加 ， 大 输出 神经 苑 的 岗 值 小 
幅度 增加 。 沪 本 数 中 靖 值 的 调整 量 仅 由 神经 无 的 床 始 阔 值 和 输出 决定 。 
在 逆 数 调用 形式 四 的 各 输入 中 ，8 为 网 络 某 层 的 阔 值 矢量 ; P 为 全 1 和 矩阵; Z 为 经 过 
加 权 图 数 变换 后 的 加 权 输 入 矢量 ，N 为 加 权 输 入 经 过 输入 函数 变换 后 的 神经 元 传递 关 数 的 
输入 矢量 ，A 为 该 层 网 络 的 输出 矢量 ，T 为 日 标 失 量 ; 吾 为 误 益 矢量 ，gW 为 网 络 性 能 对 十 
阅 值 的 梯度 矢量 ，gA 为 网 络 性 能 对 十 该 层 输 出 的 梯度 矢量 : D 为 神经 元 的 距 见 甜 阵 ，LP 
为 学 习 参 数 ，leamcon 函数 的 学 习 参 数 足 由 学 习 速 率 LPlr 构成 的 ， 缺 省 值 为 0.001;， LS 为 
学 习 状态 ， 初 始 状态 时 取 值 为 []。 闭 数 返 回 疯 值 调整 景 dB 和 当前 学 习 状态 LS。 
通 数 的 调用 形式 四 返回 该 学 习 函 数 的 有 关 信息 。code 字符 中 的 取 值 为 : 
@。 'pnames': 返回 学 习 参 数 的 名 称 ; 
旧 。 'pdefaults'， 返 回 学 习 参 数 的 缺 省 值 ; 
权 ”meedg: 返 国学 习 杖 数 是 合 要 利用 梯度 矢量 ggW 或 gA， 当 咱 到 梯度 矢量 时 ， 明 数 
返 思 1。 “ 
例 326 假定 A 和 了 B 分 别 为 两 神经 元 网 络 居 的 输出 失 量 和 岗 值 矢量 
A=[0.9501; 0.2311 ]; 
B=[06068: 0.4860j 
设置 好 学 习 速 率 并 利用 公平 学 习 规则 对 说 值 进行 更 新 : 
LP.r = 0.5; 
dB = leamcon(B, [IT [AIDPT) 
阔 值 更 新 量 为 
dB = 
0.3954 
0.4474 


网 络 属性 设置 : 


如 果 要 使 网 络 第 了 层 神经 元 的 阔 值 利用 learmcon 函数 进行 学 习 ， 可 作 如 下 设置 : 
(D 将 网 络 训练 函数 nettrainFcn 设置 为 trainr， 并 设置 相应 的 训练 参数 ， 
(2) 将 网 络 自 适 应 调整 胃 数 netadaptFcn 设置 为 trains'， 并 设置 相应 的 自 适应 调整 


























参数 ， 
G) 将 网 络 第 守 层 神经 元 的 阁 值 学 习 尖 数 netbiases{fi}jlearmnFcn 设置 为 eamcon， 并 设 
置 相 应 的 学 习 参 数 。 

参见 : leamk、learnos、adapt 和 train 函数 。 

2，leamgd 

功能 ， 样 度 下降 权 值 和 半 值 学 习 闻 数 。 

格式 : ， 

CTLdW,LS]1= leamgd(W,P ZN,A,TE, gW,gA,.D,.LPRLS) 
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图 [dB,LS]=leamgd(B,PZ,N,A,TE,gW, SA,PD,LPLS) 
全 info = learngd (code ) 
说 阴 : 
learngd 明 数 采用 梯度 下 笑 方 法 对 权 值 和 网 值 进行 调 整 ， 即 权 值 和 网 值 的 调整 量 dW 为 
学 习 速率 i 和 梯度 gW 的 乘积 ; 
dWCb iD=E*gw(i ji) 
在 函数 谢 用 形式 四 中 ， 况 为 权 值 矩 阵 ，P 为 层 输入 矢量 : Z 为 层 输 入 经 过 加 权 孝 数 变 
和 换 后 的 加 权 输 入 矢量 ，N 为 加 权 输 入 经 过 输入 函数 计算 后 得 到 的 神经 元 传递 函数 的 输入 失 
量 ，A 为 该 层 神经 苑 输出 矢量 : T 为 目标 失 量 ; BE 为 误 认 矢量 ，gW 为 网 络 性 能 对 于 权 值 的 
梯度 矢量 ; gA 为 网 络 性 能 对 士 该 层 输 出 的 梯度 失 量 ，D 为 神经 元 的 距离 矩阵 : LP 为 学 习 
参数 ，leamgd 冰 效 的 学 习 参 数 是 由 学 习 速 率 LPlr 构成 的 ， 缺 省 值 为 0.01; LS 为 学 习 状 
态 ， 初 始 值 为 ]。 函 数 返 回 疯 值 调 整 量 dy 和 当前 学 习 状态 LS。 函 数 的 其 余 两 种 测 用 炬 式 
参见 函数 learncon。 
例 3.27 对 一 个 三 输入 两 神经 元 网 络 层 随机 产生 梯度 矢量 gW; 
BAW =rand(2,.3)》 
SgW = 了 
0.6154 ”09218 ”0.41763 
0.7919 0.7382 0.4057 


设置 好 学 习 速 率 并 利用 屏 度 下 降 法 对 权 值 进行 更 新 : 





LPIr= 0.5; 
dW =leamgd([ .1.0 站 gwW LTP]) 
dW= 


0.3077 0.4609 0.0881 
0.3960 0.3691 0.2029 

网 络 属性 设置 : 

如 果 要 使 网 络 第 让 层 神经 元 的 权 值 和 疝 值 使 用 leamgd 学 习 函 数 ， 可 作 如 下 设置 

《D 将 网 络 训练 函数 nettrainFcn 设置 为 rainb'、'"trainc" 或 rain， 并 设置 相应 的 训练 
参数 ， 

(2) 将 网 络 自 适 应 调整 冰 数 netLadaptFcn 设置 为 "trains'， 并 设置 相应 的 白 适 应 调整 
参数 ， ， 
G) 将 第 让 层 神经 元 的 输入 权 值 学 习 沸 数 neLinputWeightsfijjjeamFcn、 网 络 权 值 学 习 
函数 netlayerWeights{ij jjearmFcn 和 阅 值 学 习 函 数 netbiases{fij learnFcn 设置 为 leamgd'， 
并 设置 相应 的 学 习 参 数 。 

参见 ，learmmgdm、new 人 和、newcf、adapt 和 train 函数 。 

3，leamgdm 

功能 ， 动 量 梯度 下 降 权 信和 疯 值 学 习 卫 数 。 

格式 : 

DTdw,LS1=leamgdm(W,PZ,N,A,TE,gW, SA,D.LPLS) 
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加 [dB,LS ]= learmngdm(B, P Z,N,A,T,E,SW,gEA,.D,LP,LS) 
图 info = leamgdm ( code ) 
说 明 ， 
learngdm 肯 数 采用 动量 梯度 下 降 方法 对 权 值 和 阐 值 进行 调整 ， 印 权 们 和 冰 值 的 调整 值 
dW 出 动量 因子 mc、 前 一 次 学 习 时 的 调整 量 dWprev、 学 习 速率 { 和 内 度 gW 共同 确定 。 
dW(iji)=merdWprev(i， ij)+(1-mc)xlrsgWCbDj) 
函数 调用 时 各 输入 量 和 返回 量 的 含义 参见 孙 数 learncon 和 learngd， 其 中 前 一 次 学 习 时 
的 权 值 及 阔 值 调整 量 dWprey 存储 在 学 习 状态 参数 LS.dw 中 。leamgdm 函数 的 学 习 参 数 
包括 ， 
和 LPlr， 学 习 速 率 ， 缺 省 慎 为 0.01: 
@@“LPme: 动量 常数 ， 缺 省 值 为 0.9。 
例 3.28 ” 设 定 权 值 梯度 所 阵 gW 和 上 上 - -次 的 权 全 调整 量 LS.dw 为 
gW =[0.6154 0.9218 0.1763: 0.7919 0.7382 0.4057 ]; 
ELS.dw = [0.8132 0.1389 0.1987; 0.0099 0.2028 0.6038 ]; 
设置 学 习 参 数 并 利用 功 量 梯度 下 降 法 对 权 值 进行 更 新 : 
ELPir=05，LPmc = 0.8; 
dW = leamgdm(0] 0 [1[10,5 [gsW, [0EP,LS) 
dW = 





0.7121 0.2033 0.1766 
0.0871 0.2360 0.5236 


网 络 属 性 设置 : 


如 果 要 使 网 络 第 ; 层 神经 元 的 权 值 和 阔 值 使 用 leamgdm 学 习 函 数 ， 可 作 如 下 设置 : 

(1) 将 网 络 训练 函数 nettrainFcn 设置 为 rainb'、'trainc 或 ,rainr， 并 设置 相应 的 训 练 
参数 ; 
(2) 将 网 络 白 适应 调整 函数 neLadaptFcn 设置 为 “trains”， 并 设置 相应 的 自 适 应 调整 
参数 ， " 
03) 将 网 络 第 1 层 神经 元 的 输入 权 值 学 习 函 数 netinputWeights{ijj-leamFcn、 网 络 权 值 
学 习 函 数 netlayerWeightsfij}JeamFcn 和 疝 值 学 习 函 数 netbiases{fijleamFcn 设置 为 
qeamgdrm'， 并 设置 相应 的 学 习 参 数 。 
参见 : leamgd、newff、newcf、adapt 和 train 表 数 。 
4，leamh 
功能 :， Hebb 权 值 学 习 函 数 。 
格式 : 

人 [dW', LS ] = learnh ( W， PZ,NA,TBE,gW,gA,D.LPLS) 

@@ info = learnh (code ) 

说 明 : 

learah 胃 数 采用 Hebb 联想 学 习 规 则 对 神经 元 权 值 进行 调整 ， 即 西 个 神经 元 的 网 络 权 值 
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生 比 于 沁 们 的 阁 动 值 ， 所 以 当 映 个 神经 元 的 输出 问 时 为 高 时 ， 这 遇 个 神经 元 之 闻 将 具有 较 
大 的 网 络 权 值 ， 权 值 调整 值 dW 由 学 习 速 率 T、 神 经 元 输入 P 和 输出 A 共同 傅 定 。 
dW(bj)= Jr*AC)*PG) 

国 数 调用 时 各 输入 量 和 返回 量 的 含义 参见 函数 leamgd。 该 胃 数 的 学 习 参数 是 山 学 习 速 
滨 LP 构成 的 ， 缺 省 值 为 0.01。 

例 3.29 假定 P 利 A 分 别 为 -个 时 神经 元 一 输入 网 络 层 的 输入 和 输出 矢量 : 

P= [0.2722; 0.1988; 0.0153 ]; 
A= [0.7468; 0.4451]; 
设置 学 习 速 率 并 利用 Hebb 学 习 规则 更 新 权 值 : 
LPJr= 0.3; 
qdW=learnh([1 PLATE[ [ELP, ID) 
权 倡 更新 量 为 
dW= 
0.1016 0.0742 0.0057 
0.0606 0.0442 0.0034 

网 络 属性 设置 ， 

如 果 要 使 自 定 义 网 络 第 守 居 神经 元 的 权 值 利用 leamh 函数 进行 学 习 ， 可 作 如 下 设置 : 

(D 将 网 络 训练 函数 nettrainFcn' 设 置 为 trainr， 并 设置 相应 的 训练 参数 ， 

(2) 将 网 络 白 适应 调整 呆 数 netadaptFcn 设置 为 'trains'， 并 设置 相应 的 自 适 应 调整 
参数 ; 
(3) 将 第 庆 导 神经 元 的 输入 权 值 学 习 函 数 netinputWeights{i, j}.learmnFcn 和 网 络 权 值 学 
习 冰 数 netlayerWeights{ijjlearnFcn 设置 为 earnh'， 并 设置 相 的 学 习 参数 。 

参见 ，learmhd、adapt 利 train 函数 。 


S、learnhd 
功能 ;退化 Hebb 权 值 学 习 函 数 。 
格式 ， 


四 [dW LS1=leamhd(WPZ NATB,g 克 sgAD,LPLS) 

他 ) info = Jeamhd ( code ) 

说 了 明 : 

jearmnhd 因 数 是 Hebb 联想 学 习 规 则 的 变形 ， 该 函数 中 通过 增加 一 个 附加 项 来 限制 权 信 
的 规模 ， 访 附加 项 由 衰减 率 dr 和 当前 权 值 双 确定 ， 这 时 权 值 调 整 量 为 

dW(i)= Ilr*A(i)*P(j)-drsWbj) 

其 中 ，1r 为 学 习 速 率 ，P 为 神经 元 输入 ，A 为 输出 。 

郑 数 调用 时 各 输入 长 和 返回 量 的 含义 参见 函数 learmngd。 该 函数 的 学 习 参数 包括 : 

"。 ELPlr， 学 习 速 率 ， 缺 省 值 为 0.1; 

"， ， LPdr， 装 减 率 ， 缺 省 值 为 0.01。 








88 基于 MATLAB 6.x 的 系统 分 析 与 设计 ”神经 网 络 莒 





例 3.30 根据 下 列 输入 矢量 P、 输 出 矢量 A 和 不 始 权 值 年 阵 到 ， 利 用 learnhd 蚌 数 对 
神经 元 权 值 进 行 学 习 : 
了 = [0.2722; 0.1988; 0.0153 ]:; 
A=f 0.7468; 0.4451 ]; 
到 =[0.6721 ”00196 ”03795，0.8381 ”0.6813 。 0.8318 ]: 


设置 学 习 速 率 、 误 减 率 并 更 新 权 值 ; 
LPr=05; ELP.dr=0.05; 
qdW =icamhd(W.P,[L[ILA,[EIL OCTULP II) 
qdW = 
0.0680 ”0.0733 -0.0133 
0.0187 ”0.0102 -0.0382 


网 络 属性 设置 ; 


如 果 要 使 网 络 第 i 层 神经 元 的 权 值 利用 leamhd 的 数 进行 学 习 ， 可 作 如 上 设 丧 ; 
(D 将 网 络 的 训练 函数 nettrainFcn 设置 为 trainr， 并 设置 相应 的 训练 参数 
(2) 将 网 络 的 自 适应 调整 轿 数 netadaptFcn 设置 为 trains'， 并 设置 相应 的 上 适应 调整 





参数 ; 
(3) 将 第 层 神经 元 的 输入 权 值 学 习 函数 neLinputWeights{ij}.learnFcn 和 网 络 权 人 学 习 
函数 netlayerWeights{ijjlearmFcn 设置 为 1earmhd'， 并 设置 相应 的 学 习 参 数 。 

参见 : learmhd、adapt 和 train 函数 。 


6、learnis 
功能 : 是 内 权 值 学 习 函 数 。 
格式 : 


@ [daW.LSj=leamis(WWPZN,A, 工 BE,gW,sA.D,LPLS) 
国 info = learnis (code ) 
说 阴 : 
iearmnis 画 数 利用 是 内 联 候 学 习 方 法 对 权 值 进行 调整 。 在 该 方法 中 ， 当 神经 元 其 有 高 输 
出 时 ， 权 值 将 向 当前 输入 矢量 进行 和 近 训 整 ， 这 样 当 网 络 再 输入 同一 矢量 时 ， 该 神经 元 将 
出 现 册 显 的 高 输出 。learnis 函数 中 的 权 值 调整 原理 为 
dW(i ji)=Iir*AGi)*(Pi)-W(ib j)) 
其 中 ，fr 为 学 习 速 罕 ，P 为 神经 元 输入 ，A 为 输出 ， 更 为 当前 权 值 逢 阵 。 
函数 调用 对 各 输入 量 和 返 问 量 的 含义 参见 函数 learngd。 该 函数 的 学 习 参 数 为 学 习 速率 
LPir， 缺 省 值 为 0.01。 
例 331 根据 上 列 输 入 矢量 P、 输 出 矢量 A 和 原始 权 值 矩 阵 W， 利 用 leamis 蚁 数 对 
:神经 元 权 值 进行 学 习 : 
P= [0.2722; 0.1988: 0.0153 
A= [0.7468; 0.4451 ]; 
W=[06721 00196 03795; 08381 0.6813 。 0.8318 下 


浊 
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设 凡 学习 速 府 并 更 新 权 值 : 


LP.r=0.S: 
dwW=leamis(w. PT.ALLIL ULLLP,D) 
dW = 
-0.1493 0.0669 -0.1360 
-0.1259 -0.1074 -0.1817 
网 络 属性 设置 ， 


如 果 旧 使 网 络 第 ; 层 神 经 元 的 权 值 利用 leamis 函数 进行 学 习 ， 可 作 如 下 设置 : 
到 数 nettrainFcn 设置 为 rainr ， 并 设 咒 相 避 的 训练 参数 ， 
(2) 将 网 络 的 日 适应 调整 前 数 net'adaptFen 设置 为 rains'， 并 设置 相应 的 口 适 应 测 整 
参数 ， 
(3) 将 第 计 居 神经 元 的 输入 权 值 学 习 郑 数 netinputWeights{ijjlearnFcn 和 网 络 权 值 学 习 
尊 数 netlayerWeights{fij}jlearmFcn 设置 为 eammis， 并 设置 相应 的 学 习 参 数 。 
参见 ，learnk、learnos、adapt 和 train 胃 数 ， 








7 了. learnk 
功能 ，Kohonen 权 值 学 习 函 数 。 
格式 : 


《DTdW,LS 1= leamk (到 ,P,Z,N, AT B,gW, SA,D，, LP, LS ) 
的 infoe =learmkt code ) 
说 明 ， 
leamk 数 利用 Kohonen 规则 对 权 值 进行 调整 ， 该 郑 数 多 用 于 竞争 层 网 络 中 。 
Kohonea 规则 可 以 使 输入 矢量 存储 十 神经 元 权 值 中 。 人 在 leamk 级 数 中 ， 当 神经 元 输 山 为 0 
时 ， 相 值 不 作 调整 ， 当 和 输出 不 为 0 时 ， 权 值 调整 量 为 
dW(bji)=Ir*(PG) -到 (bj)) 
其 中 ，t 为 学 习 速率 ， 了 为 神经 元 输入 ， 允 为 当前 权 值 移 阵 。 
肯 数 调用 时 各 输入 量 和 双 回 量 的 含义 参见 范 数 ljearngd。 该 函数 的 学 习 参 数 为 学 习 速 率 
LPIr， 缺 省 值 为 0.01。 
例 3.32 对 一 个 三 输入 两 神经 元 的 网 络 层 ， 设 定 输入 失 量 P 和 权 人 矩阵 W， 并 让 算 
输出 失 量 A: 
P= [0.5028;，， 0.7095， 0.4289 ]; 
W=[03046 0.1934 0.3028; 
0.1897 ”0.6822 ”0.5417 ]; 
A=compet ( negqist(W,P)) 
A= 








CD) 1 
然后 设置 学 习 速率 ， 并 利用 Kohonen 学 习 规则 更 新 权 值 : 
LP.r= 0.5; 
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UW =1leamk( 到 ,PT 人 和 ET LP, 0) 
dW = 
0 0 0 
0.1S66 0.0136 “0.0564 
网 络 瑟 性 设置 : 
如 果 区 使 白 定 义 网 络 第 ; 层 神经 元 的 权 值 利用 learnk 肯 数 进行 学 习 ， 可 作 如 下 设置 ， 
(D 将 网 络 的 训练 函数 neLtrainFcn 设置 为 trainr， 并 设置 相应 的 训练 参数 ， 
(2) 将 网 络 的 自 适 应 调整 冰 数 netadaptFcn 设置 为 trains'， 并 设置 相应 的 自 适 应 油 整 





参数 ， 
(3) 将 第 ;让 层 神经 元 的 输入 权 值 学 习 困 数 netinputWeights{fij} ,learnFcn 和 网 络 权 值 学 习 
函数 netlayerWeights{ij}JleamFcn 设置 为 “learmk”， 并 设置 相应 的 学 习 参数 。 

参见 : learnis、learnos、adapt 和 train 阴 数 。 

8，learmmlv1 

功能 :， LVQ1 权 值 学 习 翅 数 。 

格式 ， 

外 [dW,LS]=jleamlvy1(0W,PZ,N,A,TE,gW,gA,D,LRLS) 

后 info =leamlvl (code ) 

说 明 : 

learmlvl 曙 数 利用 LVQ1 规则 对 权 介 进行 调整 ， 该 函数 多 用 于 学 习 撩 量 量化 网 络 中 。 
在 leamlvl 阴 数 中 ， 当 神经 元 输出 为 0 时 ， 权 值 不 作 凋 整 ， 当 输出 不 为 0 时 ， 权 值 将 娄 据 
梯度 矢量 gA 的 取 值 进行 调整 ; 

dW(b ji)=ir*(PO)-W(j)) 当 8ACD=0 
dwWw(i ji)=-rr(P(j)-wW(bj)) 当 8sBA(D 关 0 
中 ， 为 学 习 速率 ， 了 为 神经 元 输入 ，W 为 当前 权 值 。 
函数 调用 时 各 输入 量 和 返回 量 的 含义 参见 范 数 leamgd， 其 中 梯度 矢量 gA 用 来 表示 该 

层 神经 元 的 分 类 结果 是 否 正确 。 该 函数 的 学 习 参 数 为 学 习 束 率 LRir， 人 缺 省 值 为 001。 
例 3.33 ”根据 输入 矢量 P 和 权 值 矩阵 W， 利 用 learnlv1 函数 对 神经 元 权 值 进行 学 习 : 

P = [0.5023; 0.7095; 0-4289 ]; 

加 =103046 ”01934 03028; 0.1897 0.6822 ”0.5417 ]; 
首先 计算 神经 元 的 输出 : 

和 = cotmpet (negdist( W,P)》) 
设 定 梯度 矢量 ， 

8=f111]; 
设置 学 习 速率 并 更 新 权 值 : 

LPr=0.5; 

dW=leamlvI(W,P, EL [AI,[] [lgA[]LP[]) 
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权 值 调整 量 为 
dW= 
0 0 0 
0.1566 0.0136 ”0.0564 
网 络 属性 设置 : 


如 果 要 使 网 络 第 宇 层 神经 元 的 权 什 利用 learnlvl 苑 数 进行 学 习 ， 本 作 如 下 设 关 ; 
人 将 网 络 的 训练 函数 nettrainFcn 设 冯 为 trainr， 并 设置 相应 的 训练 参数 ; 
(2) 将 网 络 的 自 拓 应 凋 闲 函数 net-adaptFcn 设置 为 trains'， 并 设置 相应 的 和 适应 让 坚 
数 ; 
(3) 将 网 络 第 ;i 层 神经 元 的 输入 权 值 学 习 冰 数 netinputWeights{ijjJeamFcn 和 网 络 权 代 
学 习 明 数 neLlayerWeights{fijj,learnFcn 设置 为 earnlvl ， 并 设 吗 相 朵 的 学 习 人 参数 。 
参见 : learmlv2、adapt 和 train 闵 数 . 


避 


9、learmnlv2 
功能 :LVQ2 权 值 学 习 商 数 。 
格式 : 


加 [dW,LS 1= leamlv2 (到 ,P,Z,.N,A,T,E,gW, gsA,D.LP.LS ) 
四 info =leamlv2 (code ) 
说 明 : 
leamlv2 丽 数 利 凡 LVQ2 规则 对 权 值 进行 调整 。 该 吨 数 同样 用 于 学 习 矢 基 其 化 网 络 
中 ， 但 网 络 只 有 在 利用 LVQ1 规则 进行 学 习 后 ， 才 能 使 用 LVQ2 规则 。 企 利用 learmly2 呆 
数 进行 学 习 时 ， 如 果 答 出 最 大 的 斯 个 神经 元 分 别 为 和 户 而 且 输 入 矢量 落 在 这 册 个 神经 元 
的 权 值 失 量 中 间 ， 即 满足 : 
min ( di/dj,djrdi)>(1-window )A(C1+window ) 
其 中 , 由 和 直 分 别 为 输入 矢量 和 这 两 个 神经 扰 权 值 矢量 问 的 距离 ，windoew 为 学 习 参 数 中 
的 窗帘 度 参数 。 在 上 述 条 件 下 ， 如 果 神 经 死 输出 为 高 时 将 产生 正确 的 分 类 结果 ， 神 经 元 7 
输出 为 高 时 将 产生 错误 的 分 类 结果 ， 孝 么 这 两 个 神经 元 的 权 倘 调 整 量 为 
dW(i,k)=Ix*(P(k)-WCbk)) 
dW(j,k)=-r(P(E) 到 (bbk)) 
上 上 式 中 ] 为 学 习 速 雍 ，P 为 神经 元 输入 ， 更 为 当前 权 值 矩阵 。 
邱 数 调用 时 各 输入 量 和 返回 量 的 含义 参见 冰 数 leamgd。 梯 度 矢量 gA 用 来 表示 该 居 神 
经 元 的 分 类 结 昌 是 否 正 确 。 该 函数 的 学 习 参 数 包 所 
四 LPlr， 学 习 速率 ， 缺 省 值 为 0.01; 
和 LPwindow;， 窗 宽 度 ， 到 值 可 以 起 0 和 1 间 的 任意 实数 ， 缺 省 值 为 0.25， 通 常 取 
什 在 02 和 0.3 之 间 。 
例 3.34 刘 于 一 个 上 输 入 三 神经 元 的 网 络 层 利用 leamly2 函数 进行 学 习 ， 首 先 设 定 权 
值 双 、 输 入 矢量 P、 梯 度 矢量 gA， 并 计算 神经 元 的 加 权 输 入 芝 N 和 输出 量 A; 
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92 
到 =[-075 1;1 0;:1 1 
P=[0;:1 
SA=[-111]: 
N =negdistC W,P); 
入 =compet(N 
然后 设置 学 习 速率 并 更 新 权 信 : 
也 P.r= 0.5;， ELP.window = 0.25; 
dW =eamlv2(W,P,[LNA,[] [TsA,[]LP[]) 
dWwW = 
0.3750 0 
0 0 
-0.5000 0 
网 络 属性 设置 : 
如 果 要 使 网 络 第 i 层 神 经 元 的 权 值 利用 learmlv2 函 教 进行 学 习 ， 可 作 如 下 设置 : 
(D 将 网 络 的 训练 函数 nettrainFcn 设置 为 rainr， 并 设置 相应 的 训练 参数 ， 
(2) 将 网 络 的 自 适应 调整 函数 net.adaptFcn 设置 为 trains'， 并 设置 相应 的 白 适 应 调整 参 
数 ; 


0) 将 网 络 第 | 层 神经 元 的 输入 权 值 学 习 蚌 数 netinputWeights fij jjeamFcn 和 网 络 权 值 


学 习 函 数 hetlayerWeights{ijjlearmFen 设置 为 leamlv2,， 并 设置 相应 的 学 习 参 数 。 





其 


开 


参见 ， learnlv1、adapt 和 train 函数 。 

10，1learnos 

功能 : 星 外 权 值 学 习 函 数 。 

格式 : 

四 [dW,ELS ] = leamos ( W, P, Z, N, A,T, E, gEW, gsA,D,LP,LS) 

外 info =learmos code) 

说 明 : . 

leamos 冰 数 利用 星 外 联想 学 习 方法 对 权 值 进行 调整 ， 该 方法 中 权 值 调整 重 为 

dW(D j)=Iiry*(AGD-W(bj))*P() 

中 ，H 为 学 习 速率 ，PB 为 神经 元 输入 ， A 为 输出 ，W 为 当前 权 值 乱 阵 。 

函 数 调用 时 各 输入 量 和 返回 量 的 食 义 参见 函数 learngd。 该 冰 数 的 学 习 参数 为 学 习 可 率 
Plr， 缺 省 值 为 001!。 

例 335 根据 下 列 输入 矢量 P、 输 出 矢量 A 和 权 值 矩阵 W， 利 用 leamos 范 数 对 神经 

















计 元 权 值 进行 学 习 : 


P= [0.2722; 0.1988; 0.0153 ]; 
A= [0.7468; 0.4451 ]; 
克 =[0.6721 0.0196 0.3795， 0.8381 0.6813 0.83181; 


少 
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设置 学 习 速 府 并 更 新 权 值 ; 
LP.r=0.S; 
dW=learmos(W,P, [0A, [IUDP IJ) 
dWwW = 
0.0102 0.0723 0.0028 
-0.0535 -0.0235 -0.0030 
网 络 属性 设置 ; 
如 果 竖 使 网 络 第 六 神经 元 的 权 值 利用 leamos 函数 进行 学 习 ， 可 作 如 下 设置 : 
(D 将 网 络 的 训练 函数 nettrainFcn 设置 为 traine， 并 设置 相应 的 训练 参数 ; 
(2) 将 网 络 的 自 适 应 调整 另 数 netadaptFcn 设 兽 为 trains'， 并 设 署 由 应 的 日 适应 调整 
参数 ， 
(3) 将 网 络 第 层 神经 元 的 输入 权 值 学 习 函 数 netinputWeights (ij } .leamFcn 和 网 络 权 值 
学 习 霄 数 netlayerWeightsfijj.learmFcn 设 署 为 Teamos， 并 设置 相应 的 学 习 参 数 。 
参见 : learmk、learnis 、adapt 和 train 函数 。 
11，learnp 
功能 : 感知 器 权 值 和 交 值 学 习 函 数 。 
格式 : 
个 EdwW,LS ] = leamp (W,P,Z, NA,T,E,SW,gA,D,LP, LS ) 
国 [dB,LS]= ieamgd (B,P,Z,N,A,T, E,gW,gA,D,LP,LS) 
图 info = learnp ( code ) 
说 明 : - 
learnp 疗 数 可 用 来 对 感知 器 网 络 的 权 值 和 阔 值 进行 调整 ， 该 方法 中 权 值 谓 整 量 由 斩 入 
矢量 P 和 误差 矢量 王 决 定 。 
dW(b j)= EDO*P() 
衣 数 调用 时 各 参数 的 含义 参见 函数 learncon 和 leamgd。 该 咀 数 没有 学 习 参 数 。 
例 3.36 “一 个 _: 输 入 两 神经 元 网 络 层 的 输入 矢 共 PP 和 误差 失 量 己 分别 为 
P=|0.1509;，0.6979; 0.3784]; 
王 =[1 13 
使 用 learnp 函 数 对 权 值 进行 更 新 : 
6W =leamp(Tp [151 EL 50) 
dW = 
0.1S09 0.6979 0.3784 
-0.1509 -0.6979 -0.3784 


网 络 属性 设置 ; 
newp 国 数 建立 的 网 络 可 以 采用 leamp 函数 作为 学 习 函 数 ， 如 果 要 使 自 定 义 网 络 第 守 层 
神经 元 的 权 值 和 阔 值 利用 learmp 前 数 进行 学 习 ， 可 作 如 下 设置: 1 
(D 将 网 络 的 训练 冰 数 nettrainFcn 没 置 为 trainb'， 并 设置 相 记 的 训练 参数 ， 
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(2) 将 网 络 的 帮 适 应 调整 枚 数 neLadaptFcn 设置 为 rains'， 并 设置 相应 的 用 适应 测 览 
从 数 ， 
(3) 将 网 络 第 斌 此 神 经 元 的 输入 权 值 学 习 明 数 netinputWeights{ijj-leamFcn、 网 络 权 值 
学习 质数 netlayerWeights{ij}leamFcen 和 阅 值 学 习 丽 数 netbiases{ij-leamFen 没 乔 为 
eamp'， 并 设置 机 应 的 参数 。 
参见 ，learnpn、newp, adapt 和 train 半数 。 
12、learnpn 
功能 : 归 “化 感知 器 权 值 和 阔 值 学 习 函 数 。 
格式 : 
《D Ldw,LS ] = learnpn ( 殉 , P,Z,N,A,T,E,gW,gA,D,LP,LS) 
名 [dB,LS 1= learmngd(B, P, Z,N,A,T,E,gW,gA,D,LP,LS) 
父 info =learnpn (code ) 
说 明 : 
learnpn 盟 数 多 用 于 感知 器 网 络 的 权 值 和 岗 值 调 整 ， 当 输入 和 失 量 中 在 在 有 异样 本 时 ， 该 
方法 可 以 有 效 地 提高 感知 器 网 络 的 训练 速度 。 在 该 消 数 中 ， 权 值 调整 量 由 归 - 化 的 输入 和 
基 P 和 误 益 矢量 忆 其 问 决 定 ; 
dW(ibj)= ECD*PGj)7AnP 
共 中 ，nP 为 输入 矢量 P 的 模 值 ; 
nP=sqrt(1+P(L1)2+P(2)*2+… +PCR)A2) 
闭 数 各 输入 量 和 返回 量 的 含义 参见 函数 leamcon 和 leamgd。 该 函 数 没有 学 习 参 数 。 
例 3.37 -个 二 输入 两 神经 元 网 络 层 的 输入 矢量 P 和 谍 差 矢量 已 分 别 为 
P= [0.1509， 0.6979;，0.3784]， 
E=[1l; -1]; 
利用 learmpn 明 数 对 权 值 进行 更 新 : 
dW=leampn(El,P, [ET E, [0 [0D,D) 
gdW= 





0.1173 站 .5428 0.2943 
-0.1173 -0.5428 -0.2943 
网 络 属性 设置 : 
newp 函数 建立 的 网 络 可 以 采用 learpn 函数 作为 学 习 函 数 ， 如 果 要 使 自 定义 网 络 第 了 
层 神经 抱 的 权 值 和 阔 值 利用 learmnpn 函数 进行 学 习 ， 可 作 如 下 设置: 
(D 将 网 络 的 训练 函数 nettrainFcn 设置 为 rainb'， 并 说 凰 相应 的 训练 参数 : 
(2) 将 网 络 的 自 适 应 调整 两 数 net.adaptFcn 设置 为 'trains'， 并 设置 相应 的 适应 调 晒 
: 参数 ; 
G) 将 网 络 第 三 层 神经 元 的 输入 权 值 学 习 函 数 netinpufWeightsfijjiearnFcn、 网 络 权 值 
; 学 习 函 数 netlayerWeightsfijjleamFcn 和 冰 值 学 习 函 数 netbiasesfi]j,leamFcn 设置 为 
: teampn'， 并 设置 相应 的 学 习 参数 。 
参见 : learnp、newp, adapt 和 train 函数 。 
哩 
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13，1earnsom 
功能 : 自 组 织 映 射 网 络 权 值 学 习 函 数 。 
格式 : 
全 [dW,LS 1=1learnsomf WPZ,N,A,TE,8W,gA.D,LPLS) 
人 @@ info = leamsom ( code ) 
说 明 : 
learnsom 画 数 用 于 白 组 织 有 映 射 网 络 中 神经 元 权 值 的 学 习 。 人 在 learnsom 国 数 中 ， 不 仅 获 
胜 神经 元 的 权 值 要 作 调 整 ， 获 用 神经 元 邻 域内 的 权 值 也 要 更 新 ， 即 
dW(i, k)=Ir*a2yftPlk)-WCbk)) 
其 中 ，l1r 为 学 习 速 府 ，P 为 神经 元 输入 ， 允 为 当前 权 值 ， 归 为 活动 系数 。 第 ;个 神经 元 的 活 
动 系数 a2 人 按照 如 下 方式 丛 定 ; 
a2(i)=1 如 果 第 站 个 神经 元 效 胜 
a2(i)=05 如 末 第 j 个 神经 元 获 肝 ， 并 用 和 第 工 个 神经 元 的 间距 小 于 邻 域 半 径 
ng。 
a2(i)=0 片 他 。 
冰 数 调用 时 各 输入 显 和 返 盯 基 的 含义 参见 抑 数 learngd 。 该 拓 数 的 学 习 参 数 包 括 ; 
@。LPorder_ tr， 排列 阶段 学 习 速率 ， 缺 省 值 为 0.9 ， 
到 “1LPorder_steps: 排列 阶段 的 学 习 次 数 ， 缺 省 值 为 1000 ; 
自 “LPtmne_lr， 调整 阶段 学 习 速 率 ， 缺 省 值 为 002 ， 
@。LPtune_nd， 调 整 阶 段 邻 成 半径 ， 缺 省 值 为 1。 
在 本 充 数 中 ， 学 习 分 排列 和 调整 两 阶段 进行 ， 学 习 速 率 tr 在 两 个 阶段 中 要 从 
LPorder_jir 降低 到 LPtune_lr， 邻 域 半 径 nd 要 从 神经 郊 亲 的 最 大 距离 降低 到 LPtune_nd。 
例 3.38 构造 一 个 单 层 央 输入 九 神经 元 的 月 组 织 映 射 网 络 ， 网 络 的 拓扑 结构 为 六 这 
形 ， 神 经 元 间 睹 采用 linkdist 计算 方法 。 
随机 产生 输入 和 失 量 P、 权 值 矩 阵 W 和 输出 矢量 A: 
Pos = hextop (3, 3 人 











plotsom ( Pos }) 多 绘制 神经 元 拓扑 结 检 图 ， 如 图 3.15(q) 所 示 

D =1linkdist (Pos ) 

P=rand (2, 1); 

可 =Trand (9,2)， 

plotsom ( W, DA 纺 绘制 原始 神经 元 权 值 敌阵 ， 如 图 3.15( 世 所 示 


人 A=Tand (9. 1 1; 
初始 学 习 状 态 设 为 []， 学 习 速率 取 为 缺 省 值 ， 并 更 新 权 值 ， 
LP.order_ Jr = 0.9; LP.order_steps = 1000; 
LP.tune Jr = 0.02; ELP.tunpe_nd = 1 
LS=[ ]; 
[dW, LS] = learnsom (W, P, [1 5,A,[][][],[]D,LP,LS); 
plotsom ( W+dW.D); 名 绘制 更 新 后 的 神经 元 权 值 矩阵 ， 如 网 3.15(@] 所 秒 。 
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(@) 神经 元 拓扑 结构 图 人 原始 神经 元 权 值 矢量 (@) 更 新 后 神经 元 权 值 矢量 
图 3.15 自 组 红 喘 射 网 络 神经 元 折 扑 结构 图 和 权利 外 隆 图 


网 络 属性 设置 : 


newsom 曙 数 建立 的 网 络 采用 learnsom 函数 作为 学 习 闻 数 ， 如 果 要 使 白 定义 网 络 第 上 
层 神经 元 的 权 值 利用 leamsom 函数 进行 学 习 ， 可 作 如 下 设置 : 
(D 将 网 络 的 训练 函数 nettrainFcn 设置 为 trainr， 并 设置 相应 的 训练 参数 ; 
(2) 将 网 络 的 白 适 应 调整 本 数 netadaptFcn 设置 为 trains'， 并 设置 相应 的 自 适 应 调整 
参数 ， 
(3) 将 网 络 第 了 虐 导 神经 元 的 输入 权 值 学 习 函 数 neLinputWeights{ijjjearnFcn 和 网 络 权 值 
学 习 函 数 netlayerWeights{ijj.leamFcn 设置 为 learnsom',， 并 设置 相应 的 学 习 参 数 。 
参见 : adapt 和 train 函数 。 
14.，jleamwh 
功能 : widrow-Hoff 权 值 和 网 值 学 习 函 数 。 
格式 : 
O@ [TdW,LS]= leamwh(W,P,Z,N,A,TE,gW,gA,D,LP,LS) 
加 【dB,LS]=leamgd(B,P,Z,N,A,T,E,gW,gA,D,LP,LS) 
人 info =jlearnwh (code) 
说 明 : 
learmwh 利用 Widrow-Hoff 规则 对 网 络 的 权 值 和 阅 值 进行 学 习 ， 该 冰 数 多 用 十 线性 网 
络 。 在 该 方法 中 权 值 调整 量 由 输入 矢量 P、 误差 矢量 已 和 学 习 速率 Tr 共同 确定 ; 
dW(U j)=ir*EGi) *P() 
将 数 调用 时 各 输入 量 和 返回 量 的 含义 参见 函数 learncon 和 leamgd。 该 函数 学 习 参 数 是 
由 学 习 速率 LPT 构成 的 ， 缺 省 值 为 001。 
例 3.39 梅 造 一 个 2 输入 丙 神 经 元 网 络 层 ， 输 入 矢量 P 和 误差 失 量 E 分 别 为 
P= [0.5298，0.6405; 0.2091 ]; 
E=fT0.3798:; 0.7833]; 
设 定 学 习 速 率 ， 并 利用 learnwh 函数 对 权 值 进行 学 习 ; 
LPr=0.35; 
dW =learmwh 人 flP [TI B[ Il[Le,[]) 





本 
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dW = 
0.1006 0.1216 0.0397 
0.2075 0.2509 0.0819 


网 络 属性 设置 : 

newlin 函数 建立 的 网 络 可 以 采用 learmmwh 男 数 作为 学 习 前 数 ， 如 果 要 使 自 定 义 网 络 第 
忆 神 经 元 的 权 值 和 阅 值 利用 leamwh 函数 进行 学 习 ， 可 作 如 下 设置 : 

(D 将 网 络 的 训练 明 数 nettrainFen 设置 为 trainb'， 并 设置 相应 的 训练 参数 : 

(2) 将 网 络 的 自 适 应 调整 函数 net,adaptFca 设置 为 trains'， 并 设置 相应 的 良 适 应 调 





数 


辟 


(3) 将 网 络 第 字 层 神经 元 的 输入 权 值 学 习 函 教 netinputWeights{fij}learnFcn、 网 络 权 值 
学 习 晒 数 netlayerWeightsfijjleamFcn 和 羡 值 学 习 函 数 netbiases{ijlearmmFcn 设置 为 
eamwh'， 首 设置 相应 的 学 习 参 数 。 

参见 ，ncwlin、adapt 和 train 函数 。 


3.2.8 ”性 能 函数 

网 络 的 性 能 函数 如 表 3-9 所 示 。 性 能 函数 通过 计算 网 络 输出 矢量 和 月 标 矢量 之 问 的 养 
噶 来 衡量 神经 网 络 的 忻 能 。 

网 络 属性 设置 : 

神经 网 络 性 能 项 数 的 设置 步骤 如 下 ， 

(4U 将 网 络 的 性 能 函数 netperformFcn 设置 为 期 望 的 性 能 鹃 数 ， 

{2) 设置 相应 的 性 能 函数 参数 net.performParam。 


表 3-9 网 络 性 能 函数 





























因数 名 称 荔 能 
mmae 平 均 绝对 误差 疾 数 
mse 雹 方 误差 函数 
msere 训 规则 化 均 方 误差 范 数 
sse _| 平方 和 如 差 羡 数 ] 
]，mae 
功能 : 平均 绝对 误 关 函 数 。 


格式 : 

(人 D perf=mae(E,X,PP) 

轩 perf= mae (下 .net, PP ) 

轩 info=mae (code) 

说 明 : 

mae 油 数 用 来 计算 输出 量 和 日 标 矢量 之 癌 的 平均 绝对 误 答 。 
在 天 数 的 育 用 形式 人 中 ， 输 入 已 为 误差 矢量 : X 是 由 网 络 权 值 和 疯 值 参数 构 霹 的 算 
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阵 ; 


PP 为 性 能 参数 。mae 函数 在 调 扩 时 ， 输 入 入 和 PP 可 短 略 。 在 胃 数 的 调用 内 式 @ 中 ， 


输入 net 为 神经 网 络 对 象 ， 函 数 可 以 从 对 象 中 获得 网 络 的 权 值 和 阔 值 。 在 调用 形式 @ 中 ， 
输入 net 也 可 被 省 略 。 


甬 数 的 调用 形式 图 返回 该 性 能 场 数 的 有 关 信 息 ，code 字符 串 取 俏 为 : 
= "deriv: 返回 性 能 函数 导 场 数 的 名 称 ; 
= mame': 返 同性 能 函数 的 全 称 ; 
=” "pnames': 返回 性 能 闻 数 参数 的 名 称 ， 
。 "pdefaults'， 返 回 性 能 函数 参数 的 缺 省 值 。 
利用 newp 冰 数 建立 的 感知 器 网 络 采用 mae 国 数 作为 其 性 能 场 数 。 
例 3.40 计算 下 面 庶 养 尔 量 的 平均 绝对 误 美 : 
卫 =[-0.4326; -1.6656， 0.1253 ]; 
Imae( 王 ) 
ans = 


























0.7412 
参见 : mse、msereg 和 dmae 冰 数 。 
2，Imse 
功能 : 均 方 误 站 库 数 。 
格式 : 
人 perdf= mse(E,X,PP) 
人 perf= mse(E, ne PP) 
图 info = mse(cogde ) 
说 明 : 
mse 函数 用 来 计算 输出 矢量 和 目标 矢量 之 问 的 均 方 误 符 。 函 数 调用 时 各 输入 量 和 返回 


量 的 售 义 参见 mae 男 数 。 利 用 newcf、newff 和 newelm 函数 建立 的 网 络 可 以 采用 mse 函 
数 作为 其 性 能 函数 。 


例 3.41 计算 下 面 误 差 矢 量 的 均 方 误差: 
下 = [0.2877; -1.]465; 1.1909 ]: 
tnset 王 ) 
ans 一 

0.9385 

参见 : mae、msereg 和 dmse 函数 。 

3，、msereg 

功能 : 规则 化 均 方 误差 疡 数 。 

格式 : 

GD perf = msereg (E, X, PP ) 

轿 perf= msereg(E, net PP) 

的 info = msereg (code )》 


加 第 三 章 基于 MATLAB 6-x 的 神经 网 络 设计 与 分 析 99 





说 明 : 
msereg 函数 用 来 计算 网 络 的 规则 化 均 方 误 府 ， 该 性 能 明 数 不 仅 考虑 了 网 络 输出 的 均 方 
误 莽 ， 还 考虑 了 网 络 中 各 权 值 和 阅 值 参数 的 均 方 和 ， 网 络 的 狂 能 由 这 二 者 的 加 权 和 决定 。 
冰 数 调用 时 各 输入 量 和 返回 量 的 含义 参见 mae 盟 数 。 该 咕 数 的 性 能 参数 为 ; 
"PPratio: 误差 函数 中 网 络 输出 均 方 误差 的 权重 因子 ，1-PPratio 则 是 权 值 和 阅 值 
参数 均 方 和 的 权重 因子 。 
由 十 msereg 函数 在 调用 时 兹 使 用 网 络 参 数 和 性 能 参数 ， 欠 此 函数 和 输入 入、net 以 及 PP 
不 能 省 略 。 
利用 newcf、newff 和 newelm 函数 建立 的 网 络 可 以 有 梁 用 msereg 男 数 作为 其 性 能 函数 。 
例 3.42 根据 下 面 的 误 益 矢量 B、 权 值 及 疯 值 拓 阵 X， 计 算 规 则 化 均 方 误 闫 。 
E=[1.1892， -0.0376; 0.3273 ]; 
X= |0.4860 0.4565 0.4447; 
0.8913 0.0185 0.6154; 
0.7621 0.8214 0.7919 ]; 
设置 权重 因子 ， 并 计算 规则 化 均 方 误差 : 
PPratio = 0.9; 
msereg ( E, X, PP ) 


ans = 





























0.5801 
参见 : mae、mse 和 dmsereg 盟 数 。 
才 。 SSe 
功能 ， 平 方 和 误 美 函数 。 
格式 : 
人 per[= sse(E,X,PP) 
加 perf=sse(E,neb PP) 
人 info=sse(code ) 
说 明 ， 
sse 玫 数 用 来 计算 网 络 输出 矢量 和 目标 矢量 之 和 的 误差 平方 和 。 函 数 调用 时 各 输入 量 
和 返回 量 的 含义 参见 mae 函数 。 
例 343 对 下 而 的 误 共 矢量 计算 平方 和 误 益 。 
PE = [0.1746; -0.1867; 0.7258]; 
sse(E) 
ans = 





0.5921 
参见 : dsse 男 数 。 


3.2.9 ”性 能 函数 的 导 函 数 
网 络 性 能 函数 的 导 函 数 如 表 3-.10 所 ， 这 些 函 数 用 来 求 取 人 性 能 数 的 输出 对 于 各 权 值 
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及 值 参数 的 导数 ， 在 程序 中 不 真 接 调用 。 





表 3-10 性 能 函 雪 的 导 函 数 
[一 





























函数 名 称 功 能 
Dmae 平均 绝对 误差 衣 数 的 导 咀 数 
Dammse 均 方 误差 函数 的 导 函 数 
Damsereg 规则 化 均 方 误 关 函数 的 导 函 数 
上 Dsse 平方 和 误 革 冰 数 的 导 遂 数 
1，dmae 
功能 : 平均 绝对 误 答 函数 的 导 阔 数 。 
格式 : 


GD dPerf_dE = dmae ('e, E,X, perf PP ) 
人 @@ dPerft_dX = dmae (fx E, X, perf PP ) 
说 明 : 
dmae 状 数 用 来 计算 平均 绝对 误差 函数 的 输出 对 其 输入 的 导数 。 
在 函数 的 调用 形式 四 、@@ 中 ,输入 EE 为 误 准 矢 基 : X 是 由 网 络 权 值 和 疯 值 参数 构成 的 
和 矩阵，pert 为 网 络 的 性 能 值 ， PP 为 性 能 参数 。 调用 形式 @ 返 回 网 络 性 能 对 十 网 络 输 山 误 状 
的 导数 dPerf_dE， 调 用 形式 @@ 返 回 网 络 性 能 对 十 各 权 值 和 阔 值 的 导数 dPerf_dX。 
例 3.44 设 网 络 的 输出 误 益 矢量 E 和 权 值 矢量 X 为 
下 = [1 -0.5]; 
X= [3.5;0.2; -2.2;4.1 
首先 计算 平均 绝对 误 将 : 
Perf= imae( 王 ) 
perf = 

















0.7500 
然后 计算 平均 绝对 误差 对 网 络 输出 误 芷 和 权 倩 的 导数 : 
dpPerf_dE = dmae ('e EX) 
dPerf_dE = 
[2xl double] 
dPerf_dX = dmae (xx 下 , 基 ); 
dpPerf_dX' = 
ans 一 








0 0 0 0 
dPerft_dE 返 串 了 个 单元 数组 ， 即 
dpPerf_dE{L 
ans 三 
1  a-1 
参见 : mae 函数 。 


滑 
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2.，dmse 
功能 : 均 方 泥 差 函数 的 导 冰 数 。 
格式 ; 
人 DO qdPerft_dE = dmse ('e， E,X, per PP ) 
@) dpPerf_dX = dmse (xx E,X.perdf, PP ) 
说 明 : 
dmse 兽 数 用 来 计算 均 方 误差 函数 的 输出 对 上 其 输入 的 导数 。 函 数 调用 时 各 输入 量 各 返 辐 
量 的 含义 参见 dmae 六 数 。 
例 3.45 ”根据 下 列 误 乱 矢 量 已 和 权 值 失 量 X 计算 网 络 的 均 方 误区 及 其 导数 。 
卫 =[1; -0.51]; 
X=13.5;0.23 -2.2;4.11 
perf=mse(E) 
perf = 
0.62S0 
dPerf_dE = dmse('e, 王 ,X) 
dpPerf_dE = 
[2xl doublej 
dPerf_dETE) 
ans = 
1.0000 -0.5000 
dPerf_ dX = dmse(x,E, 刁 )， 


dpPerf_dX' = 
ans = 
0 0 0 0 
参见 ，mse 图 数 。 
3，dmsereg 
功能 :规则 化 均 方 误差 函数 的 导 部 数 。 
格式 ， 


个 dpPerf_dE = dmsereg ('e, E, X, Per PP ) 

@@ dpPerf_dX = dmsereg (5 EX, perf PP ) 

说 明 : 

dmsereg 孝 数 用 来 计算 规则 化 均 方 误差 晃 数 的 输出 对 其 输入 的 导数 。 性 能 参数 PP 参见 
函数 msereg， 通 数 调用 时 其 余 各 输入 量 和 返回 量 的 含义 参见 dmae 函数 。 

例 3.46 对 下 列 误 准 矢量 E 和 权 值 矢量 入 计算 规则 化 均 方 遂 差 及 其 导数 。 


下 =[13: -051]: 
和 = [3.5; 0.2; -2.2; 4.1 了 
PPrato = 0.9， 


perf= msereg(E,X,. PP )》 
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Perf = 

1.4110 
dPerf_qE = dmsereg ('e,E,X, perf PP) 
dPerf_dE = 


12xl deuble] 
gperft_dE{1 
ans 三 
0.9000 -0.4500 

dpPert_dX= dmsereg (xx, E,X,perf. PP); 

dqPerf_dX' = 

ans = 

-0.1750 -0.0100 “0.1100 -0.2050 
参见 : msereg 国 数 。 
4，dsse 
功能 ;平方 和 误 交 前 数 的 导 遇 数 ， 
格式 : 
位 dPerft_dE = dsse ('e, E,X,perf, PP ) 
多 dPerf_dX = dsse ('X,E,X,pert PP 》 
说 明 : 
dsse 冰 数 用 来 计算 平方 和 误差 呐 数 的 输出 对 其 输入 的 导数 。 撩 数 调用 时 各 参数 的 含义 
参见 dmae 肯 数 。 

例 3.47 对 下 列 误 蒜 秋明 已 和 权 值 矢 盟 X 计算 平方 和 误 站 及 其 导数 。 

E=[1; 051 

和 =[3.510.2 -2.24.1]; 

perf = sse( 忆 ) 


Perf = 

1.2500 
dpPerf_dE = dsse('e,E,X) 
dPerf_dE = 

f2xl double] 
dPerf_dE{ 
as 二 

2 -1 

dPerf_dX = dsse (0 E,X); 
dPeifE_dX' = 
ans 三 

0 0 0 0 


参见 ，dsse 明 。 


中 
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3.2.10 ” 线 搜 索 函 数 


网 络 训练 时 采用 的 线 搜索 前 数 如 表 3-11 所 示 。 线 搜索 范 数 主 监 月 一些 准 牛 由 友 问 传 
播 算法 和 邯 梯度 芭 加 和 续 播 算法 中 ， 采 用 这 些 委 法 进行 训练 的 网 络 ， 如 示 数 newef、newff 
以 及 newelm 建立 的 网 络 在 训练 时 者 要 用 到 线 搜索 郑 数 。 

网 络 属 性 设置 : 

奶 束 枚 设置 网 络 训练 算 尖 中 的 线 搜索 胃 数 ， 可 按 妇 下 步骤 进行 : 

(D 将 网 络 的 训练 盘 数 neLtuainFcn 设置 为 采用 章 千 癫 代 法 和 共 软 习 度 算法 的 训练 肯 
数 ， 如 traincgf、traincgb 、Uaincgp 、trainbfg 和 trainoss 等 ; 

(2) 将 训练 参数 中 的 neLtrainParam.searchFcn 属性 设置 为 期 型 的 线 搜索 通 数 ， 

人) 设置 训练 参数 nettrainParam 中 此 他 参数 的 恨 性 ， 


表 3-l1 线 搜 索 函 数 










































场 数 名 称 功 能 
archpac 全 潮 线 扫 索 方法 
srchbre Brent 线 搜索 方 江 
Srchcha Charaiambous 线 搜索 方法 
srchgol Gelden 区 站 分 庆 线 搜索 方法 
Srchhyb 分 和 立方 扬 信 混合 线 搜索 广 法 
1， Srchbac 
功能 [o| 漳 线 搜索 方法 。 


格式 : 

[ a, gX, perf, retcode, delta, tol ] = 

srchbac ( net X, Pd, TL Ai Q, TS, dX, gEX, perh dperf, delta, tol， ch_perf ) 

说 了 明 : 

srchbac 通 数 利用 站 | 溯 法 污 找 性 能 曲面 的 最 低 点 ， 该 男 数 适用 十 各 种 准 咎 琴 算 法 。 

明 数 的 输入 net 为 神经 网 络 对 象 ， 和 是 由 当前 权 值 和 说 值 参 数 构成 的 拓 阵 :Pd 为 延 壕 
输入 矢 基 ;型 为 每 居 的 口 杯 失 量 ，Ai 为 初始 输入 延迟 条 件 ，Q 为 批 处理 数 据 的 个 数 : TS 
为 网 络 于 作 的 时 间 长 度 ，dX 为 表示 搜索 方向 的 欠 量 ，gX 为 梯度 矢量 ; perf 为 性 能 曲面 任 
当前 权 值 和 闪 值 拓 量 X 处 的 取 值 ，dpert 为 性 能 曲面 在 和 点 沿 dX 方向 的 斜率 ，delta 为 初 
始 搜索 步 区 ;tol 为 搜索 误 芷 ;ch_perf 是 在 先前 步 长 卜 性能 电 数 的 变化 俯 。 在 冰 数 返 各 什 
中 ，a 为 性能 酌 数 从 当前 点 到 达 最 低 点 炎 经 过 的 步 长 ，8X 为 性 能 册 面 任 最 低 点 处 的 梯 虚 ， 
perf 为 性 能 函数 在 最 低 点 处 的 取 值 ，delta 为 新 的 初始 搜索 步 长 ， tol 为 新 的 搜索 误区 
retcode 返 加 琢 数 执行 过 程 中 的 - 些 相关 信息 。ietcode 出 二 个 元 素 组 成 ， 其 中 前 两 个 元 素 分 
别 返 和 搜索 过 程 旦 个 阶段 中 进行 网 络 性 能 评估 的 次 数 ， 第 -= 个 元 素 的 返回 值 可 能 取 下 弥 
各 什 : : 

下。 0: 长 泵 胃 数 运行 正常 ; 
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血 。 1;， 表示 已 达到 了 最 小 步 长 ; 
盏 2: 表示 已 达到 了 最 人 步 长 ， 


@ 3: 表示 未 满足 beta 条 件 。 “ 
问 潮 搜索 方法 用 到 的 参数 包括 ， 


@。 scal_tol: 确定 线 搜索 误差 的 尺度 因子 ， 初 始 步 长 delta 除 以 该 参数 后 得 到 线 搜索 
结果 的 误差 ， 常 设 为 20; 

alpha:， 确定 性 能 函数 下 降 是 否 症 够 大 的 尺度 因子 ; 

beta:， 确定 步 长 是 否 足 够 大 的 及 度 内 子 ; 

low_lim: 步 长 变化 下 界 : 

up_lim: 步 长 变化 上 界 ; 

maxstep: 最 大 步 长 ; 

和 minstep: 最 小 步 民 。 














以 上 这 些 参数 包含 在 训练 函数 的 参数 中 ， 和 需要 在 设置 训练 参数 的 同时 进行 设置 。 


参见 ，srchgol、srchbre、srcbhcha 和 srchhyb 前 数 。 

2， srchbre 

功能 ，Brent 线 搜索 方法 。 

格式 ; 

Ta, gX, perf, retcode, delta, toli ] = 

srchbre ( neb X, Pd, TL Ai Q, TS, dX, 8X, perf dperf, delta, tol， ch_perf ) 

说 明 : 

srchbre 函数 利用 Brent 搜索 方法 寻找 性 能 函数 曲面 的 最 低 点 ， 该 方法 结合 了 Golden 必 


间 分 割 搜索 方法 〈 参 见 srchgol 函数 ) 和 -次 揪 信 算法 的 特点 ， 其 收敛 性 优 十 Golden 接 
索 法 。 








函数 调用 时 各 输入 量 和 返回 量 的 含义 参见 srchbac 盟 数 ， 搜 索 时 用 到 的 参数 如 下: 

”scal_ tel， 确定 线 搜索 误差 的 尺度 因子 ， 初 始 步 长 delta 除 以 该 参数 后 得 到 线 搜索 
结果 的 误差 ， 常 设 为 20; 

@。 atpha:， 确定 性 能 函数 下 降 是 否 足够 大 的 只 度 央 子 : 

@ beta， 确定 步 长 是 否 足 够 大 的 尺度 因子 ， 

昌 “bmax:， 最 人 步 长 。 

参见 :srchgol、srchbac、srcbcha 和 srchhyb 遂 数 。 

3，srchcha 


功能 ，Charalambous 线 搜索 方法 。 



































格式 : 


虽 


Ta 8, pert， retcode， delta, tol ] = 

Srchcha (Det, X， Pd, Tl, Ai Q, TS, dX, gX, pert dperf, delta, tol, ch_perf ) 

说 明 : 

srchcha 函数 利用 Charalambous 线 搜索 方法 寻找 性 能 函数 曲面 的 最 低 点 ， 该 方法 是 结 


; 合 区 癌 分 制 和 三 次 插值 算法 的 混合 算法 。 
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冰 数 调用 时 务 输入 虹 和 返 品 量 的 食 义 参见 srchbac 前 数 ， 搜 索 时 用 到 的 参数 如 下 : 
时。 scal_tol， 信 定 线 搜 索 误 符 交 尺 度 内 子 ， 初 始 沙 氏 delta 除 以 该 参数 后 得 到 线 搜 索 
结果 的 误 芷 ， 常 设 为 20 : 
alpha:， 伍 定 性 能 函数 下降 足 否 是 够 大 的 及 度 内 子 ; 
beta: 确定 步 长 是 否 症 够 大 的 尺度 册子: 
gama: 避免 性 能 抽 数 下 降 过 小 的 参数 ， 常 设 为 0.1。 
参见 : stchgol、srehbac、srchbre 和 srchhyb 函数 。 
4.，sSFchgol 
功能 ，Golden 区 癌 分 割 线 搜索 方法 。 
格式 : 
[ a, gX, perf, retcode, delta,tol ] = 
Srchgol (net 和 , Pd TL Ai Q, TS, dX, 8X, perf dperf, delta, tol, ch_ Perf ) 
说 明 : 
srchgol 函数 简 用 Golden 区 间 分 割 方法 污 找 性 能 临 蛙 的 最 低 点 ， 这 种 方法 通过 对 搜索 
区 间 的 不 断 分 割 和 定位 ， 最 终 将 最 低 点 定位 在 -- 个 是 够 小 的 区 也 内 ， 这 全 区 间 的 长 度 也 就 
因 数 调用 时 各 输入 基 和 返回 量 的 含义 参见 srchbac 曙 数 ， 搜 索 时 用 到 的 参数 如 下 : 
mscal_tol， 依 定 线 搜索 误差 的 尺度 因子 ， 初 始 步 长 delta 除 以 该 参数 后 得 到 线 搜索 
结果 的 误 怎 ， 常 设 为 20 
@。 alpha: 确定 性 能 机 数 下 降 是 否 足 够 大 的 尺度 因子 ， 
bmax: 最 人 步 长 。 
参见 : srchbre、srchbac、srchcha 和 srchhyb 函数 。 


5- stchhyb 
功能 :一 分 和 立方 插值 混合 线 搜索 方法 。 
格式 : 


fa, EX, perf, retcode, delta, tol ] = 

Srchhyb (net, X, Pd, Tl Ai Q, TS, dX, gX, perf, dperf, delta, tol ch_perf ) 

说 明 : 

srchhyb 冰 数 利用 一- 种 混合 算法 寻找 性 能 井 是 的 最 低 点 ， 该 算法 结合 了 一 分 法 和 立方 揪 
值 算法 的 特点 。 

隐 数 调用 时 各 和 输入 量 和 返回 笃 的 含义 参见 srchbac 函数 ， 搜 索 时 用 到 的 参数 如 下 : 

和 scal_tol， 人 确定 线 搜索 误 座 的 尺度 因子 ， 初 始 步 长 delta 除 以 该 参数 后 得 到 线 搜索 
结果 的 误差 ， 常 设 为 20 ; 
alpha;， 确定 性 能 函数 下降 是 否 足够 大 的 尺度 央 子 ; 
beta: 确定 步 长 是 否 足够 大 的 尺度 因子; 
bmax: 最 大 步 长 。 
参见 : srchgol、srchbac、srchcha 和 srchbre 函数 。 
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3.2.11 传递 函数 


神经 无 的 传递 函数 如 表 3-12 所 示 。 

网 络 属性 设置 

如 果 要 设置 网 络 第 让 层 神经 元 的 传递 函数 ， 只 要 把 该 尽 的 传递 六 数 必 性 netlayers{ 里 
.transferFcn 设 为 期 望 的 传递 函数 即 可 。 


表 3-l2 传递 函数 
























































明 数 名 称 归 能 
compet 竞争 传递 秀 数 
Hardtim 硬 限 幅 传递 遂 数 
Hardiims 对 称 硬 限 幅 传递 表 数 
Logsig 对 数 Sigmoid 传递 函数 
Poslin 起 线性 传递 丽 数 
Purelin 纯 线 性 传递 函数 
有 adbas 高 斯 径 向 基 传 递 函 数 
Sailin 饱和 线性 传递 函数 
Satlins 对 称 饱 和 线性 传递 函数 
Softmax softmax 传递 函数 
Tansig 正切 Sigmoid 传递 函数 
[Tabas 三 角 基 传递 函数 
1，compet 
功能 : 竞争 传递 函数 。 


格式 : 

人 A=compet(N) 

全 info >= compet(code ) 

说 明 ， 

竞争 传递 函数 compet 用 来 子 找 输入 矢量 N 中 的 最 大 元 素 ， 并 把 相应 神经 元 的 输出 设 
为 1， 其余 输出 设 为 0。 输出 为 1 的 神经 元 称 为 获胜 神经 元 。 函 数 示意 图 如 图 3.16 所 示 。 


输入 nm 输出 a 
[| 号 
3 上 0 2 工 CD 习 0 


赂 3.16 ”竞争 函数 示意 图 
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盟 数 调用 形式 他 返 辐 有 关 函 数 的 信息 ，code 字符 串 取 值 为 : 
晶 vderiv:， 返回 导 函 数 的 名 称 ， 坝 数 compet 没有 导 函 数 ; 
直 。 mame': 返 上 口传 递 函数 的 全 称 ; 
昌 output: 返 思 传递 晒 数 的 输出 范围 , 
和 'active': 返 问 传递 函数 的 活跃 输入 范 财 。 
newc 和 newpnn 蝴 数 建立 的 网 络 都 采用 compet 郑 数 作为 传递 函数 。 
例 3.48 求 竞 争 传递 函数 对 上 列 输入 矢量 的 输出 : 

n= [0.1-0.5,05]; 

3=cCompet(na)》 




















a = 
(1 1 
(1L2) 工 
参见 : sim 和 softmax 国 数 。 
2.，hardlim 
功能 ， 硬 限 幅 传 递 函数 。 
格式 : 
GD A=hardtim(N) 
罗 info =hardlim (code ) 图 3.13 司 限 由 传递 旦 数 示意 岁 
说 明 : 
硬 限 幅 传 递 函数 hardlim 把 胃 数 输入 和 失 量 N 中 各 元 素 的 取 值 强迫 限制 为 1 或 0， 当 输 
入 大 于 或 等 十 0 时 ， 神 经 元 的 箱 出 为 1， 否则 和 输出 为 0。 函数 曲线 如 图 3.17 所 示 。 
newp 肯 数 建立 的 网 络 可 以 采用 hardlim 函数 作为 传递 函数 。 
例 3.49 求 硬 限 幅 传递 说 数 对 下 列 输 入 矢量 的 苯 山 。 
n=[0,1;-0.5]; 


a=hardlim(ny); 




















a 
ans 一 
工 了 0 
参见 : sim 和 hardlims 范 数 。 
3，hardlims 
功能 ， 对 称 硬 限 幅 传递 蝴 数 。 
格式 ， 
人 A=hardlimsCN) 
四 info = hardlims (code ) 图 3.]8 ”对称 硒 限 幅 传递 函数 示意 图 
说 明 ， 
对 称 硬 限 幅 传递 冰 数 hardlims 把 函数 输入 矢量 N 中 各 元 素 的 取 值 强迫 限制 为 1 或 -1， 
当 给 入 大 于 或 等 于 0 时 ， 神 经 元 的 输出 为 1， 否则 和 输 山 为 -1。 函 数 曲 线 如 图 3.18 所 示 。 
newp 函数 建立 的 网 络 可 以 采用 hardlims 函数 作为 传递 蚂 数 。 
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例 3.50 求 对 称 厂 限 幅 传 递 函 数 对 下 列 输 入 矢量 的 输出 。 
n=[0,1 -0.5]; 
a=hardtiimsdan ); 
ans = 
工 上 开 1 
参见 :sim 和 hardlim 闻 数 。 
4，logsig 
功能 :对 数 Sigmoid 传递 函数 。 
格式 : 
名 A=iogsig(N) 
包 info =logsig (code) 
说 明 : 
对 数 Sigmoid 传递 函数 的 计算 公式 用 
MATLAB 语句 表示 为 
logsig(n)=17(C1+exp(-n)) 
冯 数 曲线 如 图 3.19 所 示 。 
new 仔 和 newcf 函数 建立 的 网 络 都 可 以 采用 该 函数 作为 传递 晒 数 。 
例 3.51 求 对 数 Sigmoid 传递 通 数 对 下 列 输 入 矢量 的 输出 。 
Dn=[-1;0;0.5]; 
外 10gsSig (六 





疼 3.19 Ilogsig 传递 函数 示意 图 


ans 三 
0.2689 0.5000 0.6225 
参见 : sim、dlogsig 和 tansig 函数 。 
5，poslin 
功能 : 正 线性 传递 函数 。 
格式 : 
人 A=poslin(CN) 
多 info = poslin (code ) 
说 明 : 
对 本 输入 矢量 N 中 的 下 元 素 或 0， 正 图 320“ 正 线性 传 束 轴 数 示意 图 
线性 传递 函数 近 照 原始 数值 输出 ;对 巴 负 
; 元素， 函数 将 输出 0。 函数 曲线 如 图 3.20 所 示 。 
” ， 例 3.52 ， 求 正 线性 传递 函数 对 下 列 输入 矢量 的 输出 : 
D=[-100.5]; 
a=poslin (Dj); 























四 


介 
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ans 二 
， 0 0 05 
参见 : sim、purelin 、satlin 和 satlins 
函数 。 
6，purelin 
功能 ， 纯 线性 传递 函数 。 
格式 : 
人 @ A=purelin(N) 
@@ info = purelin ( code ) 图 3.21 纯 线性 传递 丽 数 示 疮 区 
说 明 : 
纯 线 性 传递 函数 把 输入 N 按照 原始 数值 输 山 。 冰 数 曲线 如 图 3.21 所 示 。newlin 和 
mnewlind 交 数 建立 的 网 络 都 可 以 采用 该 函数 作为 传递 函数 。 
例 3.53 求 纯 线 性 传递 函数 对 下 列 输入 矢量 的 输出 。 
D=[-10;0.5]; 
a = purelin(n ) 





-1 0 05 
参见 ，sim、dpurelin、satlin 和 satlins 函数 。 
7 了 7，radbas 
功能 :高 斯 径 向 基 传 递 函 数 。 
格式 
人 A=radbas(N) 
加 info = radbas ( code ) 
说 明 ， 
高 斯 径 向 基 心 递 函 数 的 计算 公式 用 MATLAB 
语句 表示 为 
a=exp(-nA^2) 图 3.22 高 斯 径 向 基 传递 衣 数 示意 图 
函数 曲线 如 图 3.22 所 示 。 
newpnn 和 newgrmn 肯 数 建立 的 网 络 都 可 以 采用 该 函数 作为 传递 函数 。 
例 3.54 求 高 斯 径 向 基 传 递 函 数 对 下 列 输入 矢量 的 输出 : 
n=[-1;0;0.5]; 
a=radbas (ma 六 

















aa 
ans 三 
0.3679 1.0000 0.7788 
参见 ， sim、dradbas 和 tribas 函数 。 


尽 V 
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8.，satlin 

功能 ， 人 饱和 线性 传递 兄 数 。 人 
格式 +L_ _ 

人 A=satlin(N ) /1 

@@ info = satlin ( code ) = 0 十 人 
说 了 明 : -41-]---- 一 - 

饱和 线性 函数 把 输入 矢量 N 中 位 上 了 





[0 目 区 间 内 的 元 素 按照 原始 数值 输出 ， 对 于 负 元 
素 ， 则 输出 0， 对 十 人 于 工 的 元 素 ， 则 输出 1。 咕 
数 曲 线 如 图 3.23 所 示 。 
例 3.55 ” 求 饱和 线性 传递 函数 对 下 列 输 入 矢量 的 输出 : 
nn=[-1005;12]; 
a=satlin(n ); 


疯 3.23 ”饱和 线性 传递 肯 数 示意 图 


1 


aa 
ans = 
0 0 0.5000 1.0000 
参见 : sim、poslin、purelin 和 satlins 函数 。 
9，satlins 
功能 ， 对 称 饱 和 线性 传递 狗 数 。 
格式 : 


@ A=satlins(N) 

凶 info = satiins ( code ) 

说 明 : 

对 称 饱 和 线性 传递 函数 把 输入 矢量 
中 位 于 f-1, 1] 区间 内 的 元 素 按照 诛 始 数值 输 
出 ;对 于 小 于 -1 的 元 素 ， 则 输出 -1; 对 于 
大 于 1 的 元 素 ， 则 输出 1。 晒 数 曲 线 如 图 
3.24 所 示 。 

newhop 函数 建立 的 网 络 采用 该 函数 作为 传递 函数 。 

例 3.56 ” 求 对 称 饱 和 线性 传递 的 数 对 下 你 输入 矢量 的 输出 : 

na=[-3;-10:05S; 2 


a=satlins (ay》 








图 3.24 ”对称 饱和 线性 传递 因数 示意 图 


al 
ans 一 
-1.0000 -1.0000 0 0.5000 1.0000 
参见 ， sim、poslin、purelin 和 satlin 肯 数 。 
10，softmax 


功能 : softmax 传递 函数 。 


人 
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格式 : 

人 A=softmax(N) 

多) imfo = softmax ( code ) 

说 明 : 

softmax 传递 眶 数 的 计算 公式 用 MATLAB 语 旬 表 示 为 
a=exp(n)/sum(exp(n) ) 


函数 曲线 如 图 3.25 所 示 。 该 阔 数 没有 导 阔 数 。 

















输入 m 输出 





图 3.25 softmax 传递 秀 数 水 意图 
例 3.57 求 softmax 传递 函数 对 下 列 输入 失 量 的 输出 : 
n=[ -1 0.5;2]， 


8a=softmax (aa); 


ans = 
0.0391 0.1753 0.7856 
参见 :sim 和 compet 函数 。 











11.，tansig 

功能 ;正切 Sigmoid 传递 珊 数 。 

格式 : 二 

个 A=tansig(N) 一 一 

@@ info =tansig (code ) 

说 明 " 

tansig 传递 范 数 的 计算 公式 用 MATLAB 站 
语句 表示 为 

n=2/(1+ exp(-2sn))-1! 图 3.26 tansig 传递 函数 示意 图 


函数 曲线 如 图 3.26 所 示 。newft 和 newcf 函 数 建立 的 网 络 都 可 以 采用 该 函数 作为 传递 冰 数 。 
例 3.58 求 tansig 传递 秀 数 对 下 列 输入 和 所 量 的 输出 。 
nD=[15 05;2]; 
旨 一 tansig (mn 


0.7616 0.4621 0.9640 
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参见 : sim、dtansig 和 logsig 函数 。 


12.，tribas 
功能 : 三 角 基 传递 上 数 。 
格式 ， 


四 A=tribas(N) 
@@ info = tribasfcode ) 





说 明 : 
当 输入 矢量 N 中 的 元 素 位 于 [-1, 吕 区 间 内 
时 ，tribas 传递 函数 的 计算 公式 用 MATLAB 语句 | 
表示 为 
na=1-absn) 加 3.27 ribas 传递 咕 数 示意 图 


当 元 素 在 该 区 间 之 外 时 ， 盟 数 输出 为 9。 函数 曲线 如 图 3.27 所 示 。 
例 3.59 求 tribas 传递 函数 对 下 列 输入 矢量 的 输 州 。 
n=[ -1 -05;09，2]; 
a=tribas (mn ); 


ans = 
0 0.5000 0.1000 0 
参见 :sim 和 radbas 函数 。 


3.2.12 ”传递 函数 的 导 函 数 
神经 元 传递 函数 的 导 函 数 如 表 3-13 所 示 。 
表 3-13 ”传递 函数 的 导 郊 数 









































函数 名 称 功 能 
Phardlim 和 硬 限 幅 传 递 函数 的 导 函 数 
Dhardims 对 称 硬 限 幅 传递 函数 的 导 函 数 
Diogsig _ 对 数 Sigmeid 传递 函数 的 导 函 数 
dposlin 正 线性 传递 函数 的 导 函 数 
dpurelin 纯 线 性 传递 函数 的 导 函 数 
dradbas 高 斯 径 向 枯 传 递 函 数 的 导 函 数 
dsatlin 饱和 线性 传递 函数 的 导 函 数 ] 
dsatins 对 称 饱和 线性 传递 函数 的 导 鸭 数 
dtansig tansig 传递 两 数 的 导 函 数 

dtribas 三 角 基 传递 函数 的 导 函 数 
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1，dhardlim 
功能 : 全 限 幅 传递 顺 数 的 导 冰 数 。 
格式 : 


: dA_dN =dhardlim(N,A) 


说 明 : 
该 通 数 用 来 计算 三 限 幅 函数 的 输出 A 相对 于 输入 N 的 导数 。 
例 3.60 求 硬 限 幅 传递 函数 的 输出 对 下 列 输 入 矢量 的 导数 。 
n=[01 05]: 
a=hardlim(ay》 
da_dn = dhardlim (ma，a) 
da_dn' 
ans = 
0 0 0 
参见 : hardlim 函数 。 
2、，、dhardlims 
功能 : 对 称 厂 限 幅 传递 函数 的 导 函 数 。 
格式 : 
dA_dN = dhardlims (NA) 
说 明 ， 
该 函数 用 于 计算 对 称 硬 限 幅 函 教 的 输出 A 相对 于 输入 N 的 导数 。 
例 3.61 “ 求 对 称 硬 限 幅 传递 函数 的 输出 对 下 列 输入 矢量 的 导数 。 
n=fT0: 1 -051 
中 一 hardlims (nm 和) 
da_dn = dhardims (mu a ); 
da_dn' 
ans = 
0 0 0 
参见 : hardlims 函数 。 
3、dlogsig 
功能 : 对 数 Sigmoid 传递 函数 的 导 函 数 。 
格式 : 
dA_dN=dlosgsig(N,A) 
说 明 ， 
该 函数 用 于 计算 对 数 Sigmoid 函数 的 输出 A 相对 于 输入 N 的 导数 。 
例 3.62 求 对 数 Sigmoid 函数 的 输出 对 下 列 输入 矢量 的 导数 。 
na=T[-1;0.035]; 
8a=]ogsig(n)i; 
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da_dn = dlogsig (ma ); 
da_dn' 
ang = 
0.1966 0.2500 0.2350 
参见 :logsig、tansig 和 dtansig 函数 。 


4，dposiin 

功能 正 线性 传递 函数 的 导 函 数 。 

格式 : 

dA_dN= dposlin (N,A) 

说 明 : 

该 函数 用 于 计算 正 线性 遂 数 的 输出 A 相对 于 输入 X 的 导数 。 

例 3.63 ” 求 正 线性 传递 函数 的 输出 对 下 多 输入 矢 景 的 导数 。 
员 =[-1;0;0.5 ]， 





a= poslin(nJ) 
da_dn = dposlin ( D,.aj 
da_dn' 
ans = 
0 1 


参见 ，poslin 函数 。 


5，dpurelin 
功能 ， 纯 线性 传递 郧 数 的 导 函 数 。 
格式 : 
dA_dN -= dpurelin(N.A) 
说 明 : 
该 函数 省 十 计算 纯 线性 函数 的 输出 A 相对 于 输入 N 的 导数 。 
例 3.64 ， 求 纯 线性 传递 函数 的 输出 对 下 列 输入 矢量 的 导数 。 
D=[-10051; 
a= purelin Cn 
da_dn = dpurelin (na 
da_dn' 
ans 一 
1 1 工 
参见 ， purelin 函数 。 


6 dradbas 
功能 : 涡 斯 径 问 革 传 递 函 数 的 导 函 数 。 
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格式 ， 
dA_dN = dradbas(N,A) 
说 阴 ， 
该 函数 用 于 计算 高 斯 径 向 基 函 数 的 输 旦 A 相对 于 输入 .N 的 导数 - 
例 3.65 求 高 斯 径 癌 基 传 递 函 数 的 输出 对 下 列 输入 矢量 的 导数 。 
na=[-13;0;0.5]: 
a=fadbas (n ) 
da_dn = dradbas ( n.a 
da_dn' 
ans 一 
0.8734 1.0000 0.8593 
参见 : radbas 卫 数 。 
了 .dsatlin 
功能 : 饱和 线性 传递 函数 的 导 角 数 。 
格式 ， 
dA_dN=dsatin(N,A) 
说 明 : 
该 函数 用 上 计算 饱和 线性 函数 的 输出 A 相对 于 和 输入 N 的 导数 。 
例 3.66“ 求 饱和 线性 传递 函数 的 和 输出 对 下 列 输入 矢量 的 导数 。 
n=[-1;0:0.5;2]; 
人 一 Satin (了 入 
da_dn = dsatlin(D，a 洲 
da_dn' 
ams 一 
D 1 D 
参见 : satlin 函数 。 
8，dsatlins 


功能 ， 对 称 饱和 线性 传递 函数 的 导 旺 数 。 
格式 ; 

qdA_dN = dsatlins (N,A) 

说 明 : 


该 酌 数 用 于 计算 对 称 饱和 线性 函数 的 输出 A 相对 二 输入 N 的 导数 。 


例 3.67 ” 求 对 称 饱 和 线性 传递 函数 的 输出 对 下 列 输入 矢 基 的 导数 。 
n=[-3;-10;0.5 ;2]:; 
a=satkins (nm 
da_dn = dsatlins ( n, a 
da_dn' 


上 
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angs 一 


0 1 1 1 站 
参见 ， satlins 函数 。 


9，dtansig 1 

功能 ，tansig 传递 函数 的 导 函 归 . 1 
格式 ， 

dA_dN = dtansig (CN,.A) 

说 阴 ， 


该 函数 用 于 计算 tansig 函数 的 输出 A 相对 于 输入 N 的 导数 。 
例 3.68 求 tansig 传递 函数 的 输 山 对 下 列 输 入 失 量 的 导数 。 
n=[-1 05;2]; 
a=tansig(n): 
da_dn = dtansig (mn, a )); 





da_dn' 
ans = . 
0.4200 ”037864 。 0.0707 1 

参见 :tansig、logsig 和 dlogsig 函数 。 | 由 
10，、dtribas ， 
功能 :三 角 基 传递 函数 的 导 函 数 。 站 
格式 ， ) 
dA_dN = dtribas(N,A) 机 人 
说 明 : 四 


该 函数 用 于 计算 三 角 基 函 数 的 输出 A 相对 于 输入 N 的 导数 。 
例 3.69 求 tribas 传递 函数 的 输出 对 下 列 输入 失 量 的 导数 。 和 
Dn=f-l1 -05;09; 21]; 和 


a=tribas (mn); 四 
da_dn = dtribas (n,a)i; _， 四 和 

da_dn' 2 
ans 一 ， = 7 


1 工 -1 0 
参见 : tribas 冰 数 ， 四 


3.2.13 ”加权 函 数 本 
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表 3-!4 加 权 函 数 




































函数 邹 称 功 能 
ist 殖 氏 焉 离 加 权 函 数 
dotprod | 内 积 加 权 函 数 
mandist 曼 哈 由 距离 加 权 冰 数 
megdist | 负 欧 氏 距 离 加 权 甬 数 
normprod 规则 化 内 积 加 权 函 数 
]1. dist 
功能 ， 欧 氏 距 网 加 权 团 数 。 
格式 ， 


中 Z=dist(WP) 

加 df=dist (deriv') 

时 D=dist(pos) 

说 明 : 

dist 函数 用 于 计 算 此 矢量 闻 的 欣 氏 距离 ， 其 计算 原理 用 MATLAB 语句 表示 为 

已 =sumtft(X-y).A2).^0.5 
上 式 中 ，D 是 矢量 xz 和 y 之 间 的 欧 氏 具 离 。 

在 轩 数 的 调用 形式 @ 中 ，W 为 权 值 矩阵 ，P 为 该 居 网 络 的 输入 矢量 ， 此 时 前 数 返 回 加 
权 输 入 乒 阵 Z。 盟 数 的 调用 形式 @ 返 回 距 离 函 数 导 函数 的 名 称 ， 由 于 欧 氏 距离 函数 没有 导 
衣 数 ， 所 以 调用 形式 @ 将 返 同 穿 字符 审 。 函 数 的 调用 形式 @@ 用 于 计算 自 组 织 映射 网 络 中 神 
经 元 之 间 的 距离 ， 函 数 中 pos 为 表示 神经 元 空间 位 置 的 坐标 矩阵 ， 此 时 函数 返 同 距离 矩 
阵 D。 

例 3.70 设 定 权 值 午 阵 W 利 输入 矢量 P， 计 算 欧 氏 距 离 的 加 权 输 入。 

W=[T09 0.6 0.8;02 05 0.7]: 
P=504 0 08]5 








Z=dist(W,P) 
Z= 
0.7810 
0.5477 


例 371 设 定 三 个 神经 元 的 位 置 坐标 矢量 pas， 计算 它们 之 间 的 欧 氏 距离 。 
pos=[04 09 04;06 07 09;08 02 09 
也 =dist(Pos ) 
了 = 
0 07874 “0.3162 
0.7874 人 人 0.8832 
03162 ”0.8832 0 








ae 
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网 络 属性 设置 ; 


newpnn 和 newgrnn 函数 建立 的 网 络 者 采用 dist 细 数 作为 加 权 函 数 。 如 果 娄 使 网 络 第 
层 神 经 元 权 值 的 加 权 函 数 为 dist 函数 ， 只 要 将 该 屋 输 入 权 值 和 网 络 权 信 的 加 权 数 
netinputWeights fij) weightFcn 及 netlayerWeights{ij}.weightPcn 设置 为 dist 即 可 。 
如 果 要 使 网 络 第 诗 层 的 距离 函数 为 dist 函数 ， 只 要 将 该 层 网 络 的 距离 轴 数 
netlayers{i}j.-distanceFcn 设置 为 "dist 即 可 。 
参见 ，sim、dotprod、negdist、normprod 、mandist 和 linkdist 函数 。 
2，dotproG - 
功能 :内 积 加 权 函 数 。 
略 式 : 
人 Z= detprod(W,P) 
加 凡 = dotprod (deriv ) 
说 明 ; 
dotprod 嚼 数 用 于 计算 两 矢量 之 问 的 内 积 。 
让 函 数 的 调用 形式 @ 中 ，W 为 权 值 矩 阵 ，P 为 该 层 网 络 的 输入 矢量 ， 函 数 返回 内 积 矩 
阵 Z。 冰 数 的 调用 形式 四 返回 dotprod 尔 数 导 函 数 的 名 称 ， 即 "ddotprod 。 
例 372， 设 定 权 值 矩阵 W 和 输入 矢量 P， 计 算 内 积 加 权 输 入 -。 
WW=[09 06 0.802 05 071 
P=[04 0 081; 
乙 = dotprod(W,.P) 


乙 = 
1.0000 
0.6400 
网 络 属性 设置 ; 


newp 和 newlin 函数 建立 的 网 络 都 采用 dotprod 函数 作为 加 权 函 数 。 如 果 要 使 网 络 第 ; 
层 神 经 元 权 值 的 加 权时 数 为 dotprod 闻 数 ， 只 要 将 该 层 和 输 入 权 值 和 网 络 权 值 的 加 权 函 数 
netLinputWeights{fij},weightFcn 及 netlayerWeights {ij]}weightFcn 设置 为 dotprod' 即 可 。 

参见 : sim、ddotprod、dist、negdist 和 normprod 函数 。 

3，mandist 


功能 ， 曼 险 顿 距离 加 权 函 数 。 

格式 : 

四 己 =mandistC(WP) 

加 df =mangist (dexriv ) 

人 驴 D=mandist ( pos ) 

说 明 : 

mandist 郊 数 用 十 计算 两 矢 直 同 的 曼哈顿 距离 ， 其 计算 公式 为 
了 =sum (abs(x-y)) 


人 
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上 式 中 ，D 为 失 好 x 和 y 之 问 的 总 哈 顿 距 沿 。 函 数 调用 时 各 输入 量 及 返 癌 值 的 含义 参见 冰 数 
dist。mandist 前 数 没有 导 函 数 。 
例 3.73” 设 定 一 个 权 倘 甜 阵 W 和 输入 矢量 P， 计 算 其 曼 哈 帧 距离 的 加 权 输 入 。 
W=[09 0.6 0.8;02 05 07]; 
P=[04 0 08]; 
Z=mandist(W,P)》 
了 . 
1.1000 
刀 8000 
例 3.74 设 定 一 个 神经 元 的 位 置 坐 标 撩 量 pos， 计 筑 它 们 之 疗 的 曼 哈 瑟 距 离 。 
pos=[04 0.9 0.4:06 07 0908 02 091; 
D = mandist (pos ) 


D= 
人 1.2000 0.4000 
1.2000 0 1.4000 
0.4000 1.4000 0 
网 络 属性 设置 : 


如 果 贤 使 网 络 第 夺 层 神经 元 权 值 的 加 权 函 数 为 mandist 晃 数 ， 只 要 将 该 层 输 入 权 值 和 
网 络 权 值 的 加 权 肯 数 neLinputWeigbts{ijj.weightFcn 及 netlayerWeightsfij}.weightFcn 设置 
为 mandist 即 可 。 
newsoem 示 数 建立 的 网 络 可 以 采用 mandist 函数 作为 距离 函数 。 如 果 要 使 网 络 第 层 的 
距离 函数 为 mandist 函数 ， 只 要 将 该 尽 的 距离 函数 netlayers{fi},distanceFen 设置 为 mandist 
即 Hj 。 
参见 : sim、dist 和 linkqist 函数 。 
4 negdist 
功能 : 负 欧 氏 距 离 如 权 抽 数 。 
格式 : 
人 DZ=negdist(W,P) 
四 =negqist (deriv )》 
说 明 ， 
negdist 函数 用 于 计算 了 矢 量 间 的 负 欧 氏 距 离 ， 共 计算 原 记 用 MATLAB 语句 表示 为 
D=-sum((X- y]A2).A0.5 
上 式 中 ，D 为 矢量 x 和 y 之 问 的 负 欧 氏 距 离 。 
函数 谢 用 时 各 和 输入 量 和 返 同 值 的 含义 参见 dotprod 函数 。negdist 阴 数 没有 导 果 数 。 
例 3.75 ” 设 定 一 个 权 俏 宗 阵 到 和 输入 矢量 P， 计 算 其 负 欧 氏 距 高 加 权 输 入 。 
W=I09 0.6 08;02 05 0.7 下 1 
P=[04 0 0.8]'， 
了 =negdist(W,P) 
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之 = 
-0.7810 
-0.5477 
网 络 属性 设置 ， 


Dewc 和 newsom 函数 建立 的 网 络 都 采用 negdist 函数 作为 加 权 冰 数 。 如 果 缆 使 网 络 第 
层 神经 元 权 值 的 加 权 函 数 为 negdist 函数 ， 只 要 将 该 居 输 入 权 值 和 网 络 权 值 的 加 权 师 数 
netLinputWeightsfij}.weightFcn 政 netLlayerWeights{ij).weightFcn 设置 为 negdist 即 可 。 

参见 : sim、dotprod 和 dist 函数 。 


5，normaprod 
功能 :规则 化 内 积 加 权 函 数 。 
格式 : 
人 Z=normprod(W,P) 
四 性 = normprod (deriv ) 
说 了 明 : 
normprod 函数 用 于 计算 两 矢量 之 间 的 规则 化 内 积 ， 其 计算 公式 用 MATLAB 语句 表 
示 为 
zs= wp /suimn(p) 
其 中 ，w 为 权 值 矢量 ，p 为 输入 矢量 ，z 为 规则 化 内 积 。 
函数 调用 时 各 输入 量 和 返回 值 的 含义 参见 dotprod 函数 。nhormprod 函数 没有 导 函 数 。 
例 3.76 设 定 权 值 矩阵 W 和 输入 矢量 P， 计 算 其 规则 化 内 积 的 加 权 和 输入 。 
有 =109 06 08:02 05 07 了 3 
P=[04 0 081; 
乙 =normprod (W,P) 


Z= 
0.8333 
0.5333 
网 络 属性 设置 : 


newgrmn 函数 建立 的 网 络 采用 hormprod 函数 作为 加 权 冰 数 。 如 果 取 使 网 络 第 ; 层 神经 
元 权 值 的 加 权 函 数 为 normprod 函数 ， 只 要 将 该 层 输 入 权 值 和 网 络 权 值 的 加 权 两 数 
net.inputWeights{ij}-weightFcn 及 net.layerWeights{ij}.weightFcn 设置 为 "normprod' 
即 可 。 

参见 : sim、dotprod、dist 和 negdist 函数 。 


3.2.14 “加 权 函 数 的 导 范 数 
加 权 函 数 的 导 邓 数 如 表 3-15 所 示 。 在 加 权 函 数 中 ， 只 有 dotprod 函数 具有 导 函 数 。 


四 
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表 3-15 ”加权 是 数 的 导 函 数 

















| 晴 数 名称 功能 
| paaed 内 积 加 权 函 数 的 悄 数 

ddotprod 

功能 :内 积 加 权 孙 数 的 导 函 数 。 

格式 : 


全 虹 dp=ddotprod(p ,WPZ) 

@ dzZ_dW=ddotprod(w' ,WPZ) 

说 明 : 

ddotprod 冰 数 用 于 计算 内 积 函 数 的 输出 对 输入 矢量 的 导数 。 

在 函数 的 调用 形式 中 中 ，W 为 权 值 矩阵 ，P 为 该 层 网 络 的 输入 矢量 ，2Z 为 内 积 矩 阵 ， 
函数 返 问 内 积 函数 输出 量 对 输入 和 失 量 的 导数 。 函 教 的 调用 形式 @ 返 四 内 积 函 数 输出 量 对 权 
值 扰 阵 的 导数 。 

例 3.77 设 定 权 值 矩阵 W 和 和 输入 失 量 P， 计 算 内 积 加 权 输 入 及 其 导数 。 

W=[09 06 0.8:02 05 07 
P=[04 0 0.8]; 

Z= dotprod(W,P) ， 

芝 = 

dZ_dP = ddotprod ('p, W, P,Z) 
dZ_dpP = 

















0.9000 “0.6000 0.8000 
0.2000 0.5000 0.7000 
dZ_dW = ddotprod ('"w,W,P,Z) 
dZ_dW = 
0.4000 
0 
0.8000 
参见 : dotprod 函数 。 


3.2.45 ”输入 函数 

输入 函 数 如 表 3-16 所 示 ， 这 类 孙 痕 定 了 神经 网 络 每 导 的 加 权 输 入 量 雇 何 种 方式 和 神 
经 元 阅 值 组 合 在 一 起 形成 恒 经 元 传递 函数 的 输入 。 

网 络 属性 设置 : 

如 果 要 设置 网 络 第 层 神经 元 的 输入 衣 数 ， 只 要 将 该 时 的 输入 函数 ; 
metlayers{ij.netinputFcn 设置 为 期 望 的 输入 着 数 即 可 。 : 


1， 
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表 3-16 输入 范 数 
函数 名称 切 能 
Netprod 乘积 输入 数 
上 Nesm 求 和 输入 函数 | 
1，netprod 
功能 : 乘积 输入 函数 。 
格式 : 


到 Zn 各 矩阵 叶 


人 N = netprod (Z1,.Z2, …，Zn) 
加 df = netprod (deriv' ) 
说 明 ， 


netprod 函数 以 柔 积 方式 把 加 权 输 入 和 效 值 组 合 在 一 起 。newpnn 和 newgrmm 函数 产生 
的 网 络 以 netprod 函数 作为 输入 遇 数 。 
在 函数 揭 调 用 形式 个 中 ，Z1 到 Zn 分 别 为 加 权 输 入 矩阵 或 闵 值 纸 阵 ， 此 时 函数 把 Z1 








周一 位 置 上 的 元 素 分 别 相 滋 ， 然 后 返 | 





四 











-- 个 维 数 相 阿 的 输入 矩阵 。 函 数 的 


调用 形式 加 返回 netprod 因数 导 函 数 的 名 称 ， 即 'dnetprod 。 
例 3.78 设 定 加 权 输 入 矩阵 Z1、Z2 和 阔 值 矢量 b， 证 算 其 乘积 输入 。 


ZL=[13:3 4 和 
Z2=T-12-5141 
b=f0; -1 


为 处 理 批 处 理 数 据 ， 需 要 把 阅 值 矢量 扩展 为 维 数 相同 的 矩阵 ; 


有 耻 = concur (b,2) 
了 = 

0 0 

一 1 下 

N = netprod (Z1,Z2,B) 

N= 

0 0 

“ 15 4 

参见 : sim、dnetprod、netsum 和 concur 逆 数 。 


2，netsum 

功能 ， 求 和 输入 函数 。 

格式 : 

人 N=netsum(Z1,Z2, …，Zn) 
网 性 =netsum (deriy ) 

说 明 : 


netsum 函数 以 求 和 方式 把 加 权 输 入 和 阔 值 组 合 在 一 起 。 


newp 和 newlin 等 阔 数 产生 的 
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网 络 以 netsum 抠 数 作为 输入 函数 。 
在 函数 的 调用 形式 D 中 ，Z1 到 Zn 分 别 为 加 权 输 入 矩阵 或 阔 值 矩阵 ， 此 时 函数 把 Z1 
到 Zn 各 和 矩阵 中 辐 一 位 置 上 的 元 素 分 别 相 加 ， 然 后 返回 一 个 维 数 相同 的 输入 甜 阵 。 函 数 的 
调用 形式 @@ 返 回 netsum 函 数 时 函数 的 名 称 ， 即 'dnetsum 。 
例 3.79 设 定 加 权 输 入 矩阵 Z1、Z2 和 疗 值 矢量 b， 计 算 其 求 和 输入 。 
ZL=[13;3 4]; 
Z2=[-12-51]; 
b=[0 -1]; 
为 处 理 批 处 理 数据 ， 希 要 把 阔 值 矢量 扩 堪 为 维 数 相同 的 和 阵 : 
吾 = coneur(b, 2 
N =netsum(Z1,Z2,B)》 
N = 
0 5 
-3 4 
春 见 : sim、dnetsum、netprod 和 concur 函数 。 


3.2.16 ”输入 函数 的 导 函 数 


输入 遂 数 的 导 瑚 数 如 表 3-17 所 示 。 
表 3-17 ”输入 函数 的 导 函 数 


画 数 名 称 劝 能 
Dueiproa 夭 积 痊 入 函数 的 导 闻 数 
| pmeem 求 和 输入 函数 的 导 天 数 | 


1，、dnetprod 

功能 ， 乘 积 输入 函数 的 导 函 数 。 

格式 : 

qdN_dZ = dnetprod(Z,N) 

说 明 : 

dnetprod 函 数 用 来 求 取 乘 积 输入 函数 的 输出 对 加 权 输 入 或 阐 值 的 导数 。 

在 调用 函数 时 ，Z 为 加 权 输 入 矩阵 或 阅 值 矩阵 ，N 为 乘积 输入 函数 的 输出 ， 导 函数 返 
回答 入 通 数 的 输出 N 对 加 权 和 输入 或 阔 值 Z 的 导数 矩阵 。 
例 3.806 设 定 加 各 输入 矩阵 Z1、Z2 和 赣 值 撩 量 b， 计 算 乘 积 输入 值 及 其 对 Zi 的 









































导数 。 
Zl=[T13;3 4 下 
Z2=[-12;-511]， 
b=[0;-11; 


也 = concurtb,2) 
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= netprod(Z1 Z2,B 7 
dN_dZ1 = dnetprod (ZLN) 


dN_dZ1= 
0 0 
5 于 
参见 :netprod 、netsum 和 dnetsum 冰 数 。 
2，dnetsum 
功能 : 求 和 输入 通 数 的 导 函 数 。 
格式 ， 
dN_dZ = dnetsum(ZN) 
说 阴 ， 


dnetsum 函数 用 来 计算 求 和 输入 隔 煞 的 输出 N 对 加 权 输 入 或 闪 值 Z 的 导数 。 函 数 调 用 
时 各 输入 量 和 返回 值 的 含义 参见 dnetprod 函数 。 
例 3.81 设 定 加 权 输 入 矩阵 Z1、Z2 和 疯 值 矢量 b， 计 算 求 和 输入 值 及 其 对 Z1 的 
导数 。 
Zl=F13;3 4 
Z2=[-12;-51]; 
b=[0;-1]; 
了 =concurfb,2) 
N =netsum(ZlZ2,B); 
dN_dZ1 = dnetsum(Z1N) 
dN_dZ1 = 
1 1 
1 1 
参见 : netsum、mnetprod 和 dnetprod 函数 。 


3.2.17 ”拓扑 荔 数 


自 组 织 了 映 射 网 络 的 拓扑 函数 如 表 3-18 所 示 。 
表 3-!18 拓扑 函数 


























函数 名 称 功能 
Edtop 长 方形 网 格 拓扑 函数 
eaop 六 边 形 网 格 拓扑 函数 

[aoe 任意 形状 网 格 拓扑 函数 加 | 
网 络 属性 设置 ; 


; 如 果 要 设置 网 络 第 让 层 的 拓扑 函数 ， 只 要 把 该 层 的 拓扑 通 数 netlayersfij.topologyFfcn 
; 设 为 期 望 的 拓扑 函 煞 即 可 。 
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1，gridtop 

功能 ， 长 方形 网 格 拓扑 冰 数 。 

格式 ， 

pos = gridtop ( diml, dim2,，…， dimN ) 

说 明 : 

gridtop 函数 将 自 组 织 映射 网 络 的 神经 元 Nearon Positions 
排列 在 Y 维 长 方形 网 格 上 。 函 数 输 入 diml 到 3 
dimN 是 网 络 在 各 维 上 分 布 的 神经 元 个 数 ， 函 2 
数 返 加 各 神经 元 的 坐标 逢 阵 。 全 站 

例 3.82 将 16 个 神经 元 排列 在 4x4 的 量 "和 
攻 方 形 网 格 上 ， 并 显示 神经 元 的 拆 扑 结构 。 | 

pos = gridtop (4, 4 0| 





005115225 3 


lotsom S 
了 (pos ) Position(lji) 


其 拓扑 结构 如 图 3.28 所 示 。 
参见 : hextop 和 randtop 晒 数 。 图 3.28 神经 元 在 长 方形 网 格 上 排列 的 拓扑 图 
2，hextop 
功能 : 六 边 形 网 格 折 扑 函数 。 
格式 : 
pos = hextop ( diml, dim2，…，dimN ) Neuron Positions 
说 明 : 3 
hextop 函数 将 白 组 织 映 射 阅 络 的 神经 元 235 
排列 在 六 维 六 边 形 网 格 上 。 冰 数 输入 diml 到 全 2 
dinmN 是 网 络 在 各 维 上 分 布 的 神经 元 个 数 ， 函 呈 15 
数 返 回 神经 元 的 坐标 矩阵 。 1 1 
例 3.83 将 16 个 神经 元 排 询 在 4X4 的 05 
六 边 形 网 格 上 ， 并 显示 神经 元 的 折 执 结构 。 
pos = hextop【4, 4 和 一 05 
0 05 1 15 2 25 3 35 
plotsom ( pos ) osition(l3 
其 拓扑 结构 如 图 3.29 所 示 。 
参见 :gridtop 和 randtop 押 数 。 图 3.29 神经 元 在 六 边 形 网 格 .上 排列 的 拓扑 图 



































3，randtop 

功能 : 任意 形状 网 格 拓扑 胃 数 。 

格式 : 

pos = randtop ( diml, dim2，…, dimN ) 

说 明 : 

randtop 函数 将 自 组 织 映 射 网 络 的 神经 元 排列 在 维 任意 形状 的 网 格 上 。 函 数 输入 
dimi 到 dimN 是 网 络 在 各 维 上 分 布 的 神经 元 个 数 ， 上 明 数 返回 神经 元 的 笃 标 年 阵 。 





忆 
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例 3.84 将 16 候 神 经 元 排列 在 4X4 的 任意 缘 状 网 格 上 ， 并 时 示 神 经 元 的 拓扑 结构。 
pos = randtop ( 4, 4 
plotsom (pos ) 
其 折 扑 结构 如 图 3.30 所 示 。 
参见 : gridtop 和 hextop 函数 。 











0 05 1 15 2 
Position0l 


图 3.30 ”神经 元 在 任意 形状 网 格 上 排列 的 拓扑 图 





3.2.18 ”距离 项 数 


自 组 织 轴 射 网 络 的 距离 函数 如 表 3-19 所 示 。 

网 络 属性 设置 

如 果 双 设置 网 络 第 层 的 距离 函数 ， 只 要 把 该 层 的 距离 函数 neLlayersfij.distanceFcn 设 
为 期 望 的 距离 冰 数 即 可 。 





表 3-19 距离 函数 


三 函数 各 称 | 功能 ] 


boxdist Box 语 离 函数 

中 st 欧 氏 距离 加 权 函 数 
linkdist Link 距离 函数 
mandist 曼哈顿 距离 加 权 函 数 





























1，、boxdist 

功能 :Box 距离 函数 。 

格式 : 

D = boxdist (pos ) 

说 明 : 

该 函数 用 于 计算 两 矢量 间 的 Box 距离 ， 其 计算 方式 用 MAILAB 语句 表示 如 下 : 
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D=max(abs(x-y)) 
上 式 中 ，D 为 矢量 x 和 y 之 问 的 距离 。 当 神经 元 空间 分 布 的 拓扑 结构 由 gidtop 逊 数 确定 
时 ， 常 采用 boxdist 函 数 计算 神经 元 之 问 的 距离 。 
本 函数 的 输入 pos 为 神经 元 的 坐标 矩阵 ， 函 数 返 回 距 离 所 阵 D。 
例 3.85 设 定 三 个 神经 元 的 位 置 坐 标 矢 量 pos， 并 计算 它们 之 间 的 Box 距离 。 
pos=104 09 0.40.6 07 09;08 02 0.91]; 
D =boxdist (Pos ) 














卫 = 
人 0 0.6000 0.3000 
0.6000 人 0.7000 
0.3000 0.7000 0 
参见 ，sim、mandist 和 linkdist 函数 。 
2 dist 
参见 3.2.13 小 节 中 关于 dist 了 天数 的 说 明 。 
3，linkdist 
功能 :Link 距离 多 数 。 
格式 : 
D = linkdist(pos )》 
说 明 ， 
该 函数 用 于 计算 两 矢量 间 的 Link 距离 ， 其 计算 原理 用 MAILAB 语句 表示 如 下 : 
Di=0 如 果 i=j 


Di=1l 如 果 ((sum((P-Pi).^2)).A05)<=1。 
Di=2 如果 存 在 k ， 使 px=DN=1i 成 立 。 
Di =3 如果 存 在 ki 、 je ， 使 Dik = Dee= Duj=l 成 立 。 
Da=M 如 果 存 在 kf 、 避 、… 、kw ， 使 Dk=Dke=… =Dai=1l 成 立 。 
Di=S 其 他 
上 式 中 Pi 和 Pj 分 别 为 某 层 网 络 中 任意 两 神经 元 f 和 的 坐标 矢量 ， Di 是 它们 之 间 的 
距离 。 
本 函数 的 输入 pos 为 神经 元 的 坐标 矩阵 ， 孙 数 返 回 距离 矩阵 D。 
例 3.86 ， 设 定 三 个 神经 元 的 位 置 坐标 矢量 pos， 计 算 它们 之 间 的 Link 距离 。 
pos=[1 1 131 2 了 2 2 1]; 
D= linkdist (pos ) 





D= 
0 T T 
1 0 2 : 
工 2 0 : 
参见 : sim、mandist 和 dist 通 数 。 ; 


各 
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4、tmandist 


参见 3.2.13 小 节 中 有 关 mandist 函数 的 说 明 。 
3.2.19 ”数据 预 处 理 和 后 处 理 函 数 
网 络 训练 前 、 后 数据 的 预 处 理 和 后 处 理 函 数 如 表 3-20 所 示 。 


表 3-20 数据 预 处 理 和 后 处 理 函 数 












































函数 名 称 功 能 ] 
Premrmmx 把 数据 归 一 化 到 -1 和 1 之 间 
Postmnmx 恢复 被 函数 premnmx 归 一 化 的 数据 
postreg 利用 线性 思 归 分 析 对 神经 网 络 的 仿真 结果 进行 后 处 理 
prestd 把 数据 归 一 化 为 单位 方差 和 有 零 均 值 
Poststd 恢复 被 函数 prestd 几 一 化 的 数据 
prepca 对 输入 数据 进行 主 元 分 析 
trammmx 利用 预先 计算 的 最 大 和 最 小 值 对 数据 进行 变换 ] 
trastd 利用 预先 计算 的 均值 和 方差 对 数据 进行 变换 
[tapea 利用 预先 计算 的 主 元 分 析 年 阵 对 数据 进行 变换 
1，Prenanmx 


功能 :把 数据 归 一 化 到 -1 和 1 之 间 。 


格式 ; 


四 「『Pn, minp, maxp, Tn, mint maxt ] = premnmx (PT) 
国 [ Pn, minp. maxp ] = premnmx (P) 


说 明 : 














premmnmx 函数 月 


在 [-1, 1 区 闻 内 。 归 - 





于 对 网 络 的 输入 数据 或 目标 数据 进行 归 一 化 ， 归 一 化 后 的 数据 将 分 布 
-化 公式 为 


Pn=2*(P-minp)A(maxp-minp ) 一 上 

Tn=2*(T-mint)A(maxt-mint ) 一 1 
其 中 ，P 为 诛 始 输入 数据 ，maxp 和 minp 分 别 是 P 中 的 最 大 值 和 最 小 值 ，Pn 为 归 一 化 后 的 输 
入 数据 。T 是 原始 目标 数据 ，maxt 和 mint 分 别 是 IT 中 的 最 大 值 和 最 小 值 ， Tn 是 归 一 化 后 的 目 


标 数据 。 





函数 的 调用 形式 @ 可 以 把 网 络 输入 数据 P 和 目标 数 拷 T 归 一 化 为 Pn 和 Tn， 同 时 返回 
P 中 的 最 小 值 minp 和 最 大 值 maxp， 以 及 T 中 的 最 小 值 mint 和 最 大 值 maxt。 也 可 以 利用 
函数 的 调用 形式 @ 只 对 输入 数据 P 进行 归 一 化 。 

示例 参见 例 3.87。 

参见 ，prestd、prepca 和 postmnmyx 函数 。 


2，postmmnoax 


功能 : 恢复 被 函数 premnmx 归 一 化 的 数据 。 
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格式 : 


人 [P, 开 ] = postmamx ( Pn, minp, maxp, fn, mint, maxt ) 
人 [P] = postmnmx ( Pn, minpb, maxp ) 


说 明 : 


该 函数 用 于 恢复 被 函数 premnmx 归 一 化 的 数据 ， 变 换 公式 为 
P=0.5*(Pn+l)*(maxp-minp )+ minp 
其 中 ，PB 为 原始 数据 ，maxp 和 minp 分 别 是 P 申 的 最 大 值 和 最 小 值 。Po 为 妇 一 化 后 的 数据 。 


同 理 


T=-0.5*(Tn+l )*( maxt-imint ) + mint 


函数 的 调用 形式 四 可 以 在 已 知 P 中 的 最 小 值 minp 和 最 大 值 maxp， 以 及 宰 中 的 最 小 值 


Imint 和 最 大 值 maxt 的 前 提 下 ， 
据 P 和 了 。 也 可 以 利用 函数 的 调 

















用 形式 @@ 只 恢复 归 一 化 输入 数据 P。 





例 3.87 把 下 列 数 据 归 一 化 到 FL 1 区 闻 内 并 恢复 其 原始 数据 。 
p=[-10 -7 -55 -25 0]; 
t=[ 0 77 -10 -95 0 


首先 对 数据 进行 归 一 化 : 








fpn, minp, maxp, tn, mint, maxt ] = premnmx (《p,t) 


pn = 
-1.0000 -0.4000 -0.1000 0.5000 1.0000 
Iminp = 
-10 
Taxp = 
0 
tn = 
0.1299 1.0000 -1.0000 -0.9435 0.1299 
Tint = 
-10 
Inaxt = 
7.7000 
然后 恢复 原始 数据 : 
fp,t] = postmnmx ( pn, minp, maxp. tn, mint maxt ) 
p= 
-10.0000 -7.0000 -5.5000 -2.5000 0 
t= 
0 7.7000 -10.0000 -9.5000 0 


参见 :prestd、prepca 和 premnmx 冰 数 。 


3，postreg 


功能 ， 利 用 线性 四 归 分 析 对 神经 网 络 的 仿真 结果 进行 后 处 理 。 


把 归 一 化 的 网 络 输入 数据 mm 和 目标 数据 Ta 恢复 为 原始 数 
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格式 : 
[m,b,r]= Postreg(A,T) 
说 明 : 
该 数 对 网 络 的 仿真 输出 和 日 标 矢 量 进行 线性 回归 分 析 ， 并 得 到 目标 矢量 对 网 络 输出 
的 相关 系数 ， 从 而 可 以 作为 检验 网 络 性 能 的 参数 。 
函 数 的 输入 分 别 为 网 络 输出 矢量 A 和 目标 矢量 T， 函 数 返 癌 线性 拟 合 直线 的 斜率 吓 、 截 
距 系数 b 以 及 输出 矢量 A 和 目标 矢量 T 之 间 的 相关 系数 r。 当 为 1 时 ， 和 输出 和 目标 矢量 之 间 的 
相关 性 最 好 。 
例 3.88 利用 级 联 前 向 网 络 对 下 列 样本 
数据 进行 学 习 ， 并 对 网 络 的 实际 输出 矢量 和 Best Linear Fi A 一 (DT 十 (344e 一 13) 
目标 矢量 进行 线性 回归 分 析 。 
P = [-0.92 0.73 -0.47 0.74 0.29]; 
net= newff (minmax (p) [5 1 ]， 
{f tansig'， purelin' }，'trainlm' ); 
t=1-008 3.4 -0.82 0.69 3.0; 
net = train ( net, P, t 六 
了 = sim (netpD) 
Tm, br]= postreg(a't); 
































分 析 结 果 如 图 3.31 所 示 。 4 
参见 ，premnmx 和 prepca 函数 。 
4，prestd 图 331 线性 回归 分 析 结果 
功能 ， 把 数据 归 一 化 为 单位 方差 和 零 均 值 。 
格式 : 


@@O [T Pn, meanp, stdp, To, meanb stdt1= prestd (PT) 
四 [ Pn, meanp, stdp ] = prestd (了 ) 
说 明 ， 
Prestd 函数 用 于 对 网 络 的 输入 数据 或 目标 数据 进行 归 一 化 ， 归 一 化 后 的 数据 将 具有 零 
均值 和 单位 方差 。 归 一 化 公式 为 
Pn =(P-meanp ) /stdp 
其 中 ，P 和 Pn 分 别 为 归 一 化 前 、 后 的 输入 数据 ， ineanp 和 stdp 分 别 为 原始 数据 P 的 均值 和 
方差 。 局 理 
Tn = (T-meant ) / stdt 
其 中 ，T 和 Ta 分 别 是 归 一 化 前 、 后 的 县 标 数据 ， meant 是 原始 数据 T 的 均值 ，stdt 是 其 方差 。 
函数 的 调用 形式 @@ 可 以 把 网 络 的 输入 数据 P 和 目标 数据 T 归 一 化 为 Pn 和 Tn， 同 时 返 
回 P 的 均值 meanp 和 方差 sdtp， 以 及 的 均值 meant 和 方 益 stdt。 也 可 以 利用 前 数 的 调用 


;形式 @ 只 对 输入 数据 P 进 行 归 一 化 。 


示例 参见 例 3.89。 
参见 : premnmx、prepca、poststd 和 trastd 族 数 。 


器 
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5 poststd 


功能 ;恢复 被 函数 prestd 归 一 化 的 数据 。 


格式 ; 


他 [ 卫 工 ] = poststd ( Pn, meanp, stdp, Tn, meant stdt ) 
所 [P] = poststd ( Pn, meanp, stdp ) 


说 明 : 








poststd 基数 眉 





于 侈 复 被 阔 数 prestd 昌 一 化 的 数据 ， 变 换 公 式 为 


P= Pn*# stdp + meanp 





其 中 ，P 和 Pn 分 别 
方差 。 同 理 


为 归 一 化 前 、 后 的 数据 ，meanp 和 stdp 分 别 为 原始 数据 P 的 均值 和 


T=Tns# stdt+tmeant 
函数 的 调用 形式 四 可 以 把 归 一 化 数据 Pn 和 Tn 恢复 为 皮 始 数据 P 和 T， 同 时 需要 已 知 
也 的 均值 meanp 和 方 送 stdp， 以 及 工 的 均值 meant 和 方差 stdt。 也 可 以 利用 通 数 的 调用 形 
式 四 只 恢复 归 一 化 输入 数据 P。 
例 3.89 把 十 列 数据 时 一 化 为 共有 零 均 值 和 单位 方 次 的 数据 序列 并 恢复 其 皮 始 数据 。 


p= [10 
t=f 0 


7 -535 -2 01 
77 -10 -95 01]; 


首先 对 数据 进行 归 一 化 : 
fpn, meanp, stdp, tn, meant stdt ] = prestd (pt) 


pn = 
-12856 -0.5143 -0.1286 0.6428 1.2856 
meanp 一 
本 
stdp = 
3.8891 
tn = 
0.3170 1.3513 -1.0262 -0.9591 0.3170 
*。 Imeant = 
-2.3600 
stdt = 
7.4447 
然后 恢复 原始 数据 : 


[p,t] = poststd ( pn, meanp, stdp, tn, meant stdf ) 


P= 


-10.0000 -7.0000 -5.5000 -2.5000 0 


昌 


7.7000 -10.0000 -3.5000 站 
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参见 : premnimx 、brepca、poststd 和 trastd 前 数 。 
6，Prepca 
功能 : 对 输入 数据 进行 主 元 分 析 。 
格式 : 
[ Ptrans, TransMat ] = prepcat P, min_frac ) 
说 明 : 
prepca 半数 用 来 对 输入 数据 托 阵 P 进行 主 元 分 析 变 换 ， 该 变换 可 以 消除 各 输入 矢量 间 
的 相关 性 。 在 变换 后 的 矩阵 中 ， 部 分 矢量 上 由 有 原始 数据 矩阵 的 大 部 分 能 量 ， 保 存 了 原始 数 
据 的 大 部 分 信息 ， 因 此 变换 后 应 季 以 保 贸 ;而 有 些 矢 量 只 占有 原始 数据 的 小 部 分 能 量 ， 
此 可 以 在 变换 后 省 略 。 
函数 的 输入 P 为 原始 数据 短 阵 ，min_frac 为 最 小 能 量 比例 系数 ， 兴 变换 后 矩阵 中 茶 一 
矢量 的 能 量 在 原始 数据 总 能 量 中 所 占 的 比例 小 于 该 系数 时 ， 这 一 矢量 将 被 省 咯 。 的 数 返 牟 
经 过 主 元 分 析 的 矩阵 Ptrans 和 变换 时 使 用 的 矩阵 TransMat。 在 该 函数 算法 中 都 假定 原始 数 
据 具 有 零 均 值 ， 因 此 要 首先 利用 函数 prestd 对 数据 进行 归 一 化 。 
例 3.90 对 以 上 数据 进行 主 元 分 析 : 
p=[-15 -0.58 021 -0.96; -2.2 -0.87 031 -14;, -25 -0.38 0.44 -1.06]; 
pn=prestd(p); 
[ ptrans, transMat ] = prepca ( pn, 0.02 ) 























Ptrans = 
2.0254 -0.4243 -2.0879 0.4868 
transMat = 
-0.5794 -0.5792 -0.5733 
参见 : prestd、premnmx 和 trapca 细 数 。 
了 .村 apanX 
功能 :利用 预先 计算 的 最 大 和 最 小 值 对 数据 进行 变换 。 
格式 
[Pa ] = tramnmx(P, minp, maxp ) 
说 明 : 
本 亲 数 利用 premnmx 函数 对 样本 数据 进行 归 一 化 时 得 到 的 最 小 值 和 最 大 值 对 新 的 输入 
数据 进行 变换 。 计 算 公式 为 
Pn=2*(P-minp)/(maxp-minp )-1 
。， 上 式 申 的 P 和 Pn 分 别 为 变换 前 、 后 的 输入 数据 ，maxp 和 minp 分 别 为 premnmx 函 数 找到 的 最 
: 类 值 和 最 小 值 。 如 果 网 络 训练 时 所 用 的 是 归 一 化 样本 数据 ， 于 么 以 后 使 用 网 络 时 所 用 的 新 
; 输入 数据 也 应 该 和 样本 数据 - - 样 接受 相同 的 预 处 理 ， 这 时 就 要 用 到 tramnmx 函 数 。 
: 例 391 利用 级 联 前 向 网 络 对 下 绚 归 一 化 样本 数据 进行 学 习 ， 并 用 新 的 输入 数据 检验 
: 网 络 。 


哺 
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pb=[-1.92 273 -1.47 0.74 2.29]; 
t= [-0.38 3.4 -082 0.69 3.1]; 
[pn, minp, maxp, tn, mint, maxt ] = premnmx ( P,t 和 5 
net = newff (minmax (pn),[51],('tansig' purelin' }， tainlm' ); 
net = tain (net, pn, tn ); 
p2=[2 2]; 
p2n = tramnmx ( p2, minp, maxp ); 
a2n = sinm ( net, p2n ]; 
a2 = postmnmx (a2n, mint， maxt) 
a2 = 
2.9362 -0.259S 
参见 ，premnmx、prestd、prepca、trastd 和 trapca 函数 。 
8 trastd 
功能 ， 利 用 预先 计算 的 均 仁 和 方差 对 数据 进行 变换 。 
格式 : 
[ Pa ] = trastd ( P, meanp, stdp ) 
说 明 : 
本 浮 数 利用 prestd 函数 对 样本 数据 进行 娄 - 化 时 得 到 的 均值 和 方差 对 新 的 输入 数据 进 
行 变换 。 计算 公式 为 
P=Pnyxstdp + meanp 
土 式 中 的 P 和 Pn 分 别 为 变换 前 、 后 的 答 入 数据 ，meanp 和 stdp 分 别 为 prestd 了 数 找到 的 均值 和 
方 答 。 如 果 网 络 训练 时 所 用 的 是 归 一 化 样本 数据 ， 那 么 以 后 使 用 网 络 时 所 用 的 新 输入 数据 
也 应 该 和 样本 数据 - 样 接受 机 同 的 顶 处 罗 ， 这 时 就 要 用 到 trastd 未 数 。 

例 3.92 利用 级 联 前 向 网 络 对 上 询 归 -化 样本 数据 进行 学 习 ， 并 用 新 的 输入 数据 检验 
网 络 。 
p=[-1.92 2.73 -1.47 0.74 2291， 
t= [-0.38 3.4 -082 0.69 3.11; 

[ pn, minp, maxp, tn, mint, maxt ] = prestd ( P, t); 





net=newff (minmax(pn ),[S 11],{'tansig' "purelin }， trainlm 7 
net = train (net pn, tn ); 
p2=[2 -2 
p2n = trastd ( p2, minp, maxp ); 
a2n = sim ( net, p2n ); 
a2 = poststd (a2n, mint, maxt) 
a2 = 
2.9611 -0.3619 
参见 ，premnmx、prestd、prepca、tramnmx 和 trapca 六 数 。 
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9，trapca 

功能 ， 利 用 预先 计算 的 主 元 分 折 拖 阵 对 数据 进行 变换 。 

格式 : 

[ Ptrans ] = trapca ( P, TransMat ) 

说 阴 ; 

本 了 男 数 利用 prepca 玖 数 对 样 木 数 据 进行 主 元 分 析 时 得 到 的 变换 撼 阵 TransMat 对 新 的 
输入 数据 P 进行 变换 。 如 果 了 网络 训练 时 所 用 的 是 经 过 主 元 分 析 的 样 木 数据 ， 那 么 以 后 使 用 
网 络 时 所 用 的 新 输入 数据 也 应 该 和 样本 数据 一 样 接 受 相同 的 预 处 理 ， 这 时 就 要 用 到 tapca 
函数 。 

例 3.93 ”利用 级 联 前 向 网 络 对 下 列 经 过 主 元 分 析 的 样本 数据 进行 学 习 ， 并 用 新 的 输入 
数据 检验 网 络 。 

D=[-192 2.73 -147 074 2.29;， -22 -087 031 -4 -121 
t= [038 34 -082 0.69 3.1]; 
[ pn, meanp, stdp, tn, meant, stdt ] = prestd ( P, t 

[ ptrans, transMat ] = Prepca (pn 0.02) 

net = hewff (minmax ( Ptrans ), [5 1 ],{'tansig' purelin }， trainlm ) 
net = train ( net, ptrans, tn ); 

pP2=[25 -18 -09 21 

p2n = trastd ( p2, meanp, stdp ); 

p2trans = trapca (P2n, transMat ) 

a2n = sim ( nct, P2trans ) 

3a2 = boststd ( a2n, meant, stdt ) 

32= 




















3.1045 -0.9787 
参见 ，premnmx、prestdt、prepca、trastd 和 tramnmx 函数 。 


3.2.20 “分析 函数 














分 析 函 数 如 表 3-21 所 示 。 
表 3-21 分 析 函 数 
函数 名称 功 能 
errsorf 计算 单 输入 神经 元 的 误差 曲面 
Maxlintr 求 取 线 性 神经 网 络 的 最 大 学 习 速率 





1，ermrsurf 

功能 :计算 单 输入 神经 元 的 误 答 曲面 。 
格式 ， 

卫 = errsurf (PT WVBVE) 
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说 明 : 


该 国 数 可 用 十 计算 单 输入 神经 元 在 给 定 的 权 值 范围 矢量 和 阅 值 范围 矢量 情况 不 的 网 络 


误差 。 函 数 的 输入 为 神经 元 输入 矢量 P、 目 标 矢量 T、 权 值 范围 矢量 
BV 以 及 神经 元 传递 谓 数 F， 函 数 返 回 误差 曲面 各 点 的 误差 卫 。 
例 3.94 神经 元 的 输入 和 目标 矢量 分 别 为 
p=[61 6 -41 -40 40 41 -6 61]; 
t= [0 1 097 099 001 003 0 1 
给 定 权 值 和 赣 值 范 玫 矢量 ， 并 计算 误差 : 
wy = -1.5:0.1:1.5 by = -3:0.2:3; 
es 一 errSurf (p, b wV, bv, logsig 沪 
绘制 误 盖 蝎 面 和 等 沿线 ， 如 图 3.32(@、( 人 加) 所 示 。 
plotes (wv,bv, es, [60 30] ) 
设置 权 值 w、 冰 值 b 和 误差 e， 并 在 误差 曲面 上 标识 出 这 组 权 值 
位 置 : 

















w=0 b=0 
&= sse (t-logsig(w*p+b )); 
plotep ( w, be 


Error Surface Error Contour 


本 
1 





Sum Squared Error 
Bias B 





Weight W 
(a) 误差 曲面 ()) 等 高 线 


阅 3.32 误 莽 曲面 和 等 商 线 





是 w 利 b。 
参见 : pletes 和 plotep 喇 数 。 
2.maxlinlr 
功能 : 求 取 线 性 神经 网 络 的 最 大 学 习 速率 。 
格式 : 
人 =maxtinir(P) 


WV、 浆 值 范围 矢量 


、 阔 值 以 及 误差 点 的 


其 中 ， 图 3.32(g) 中 的 亮点 对 应 的 误 盖 为 e， 图 3.32 人 (已 中 的 亮点 对 应 的 权 值 和 阔 值 分 别 
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@@ = maxiinlr ( P,'bias' ) 
说 明 : 
maxlinlr 随 数 可 以 根据 线性 神经 网 络 的 输入 矢量 P 设 定 网 络 的 学 习 速 率 。 当 网 络 神经 元 
没有 阔 值 时 ， 使 用 函数 的 调用 形式 @D 来 获得 权 倘 的 学 习 速率 ， 当 网 络 神经 元 有 闪 值 时 ， 使 
用 调用 形式 @ 得 到 权 值 和 闪 值 的 学 习 速 率 。 
例 3.95 ”线性 神经 网 络 的 输入 为 
了 =[4 -4 73 10 6]; 
对 一 个 有 阅 值 的 线性 神经 网 络 ， 根 据 输入 来 确定 学 习 速 率 : 
1 = Imaxlinir(P, bias' ) 
= 





0.0066 
参见 : learnwh 函数 。 


“3.2.21 绘图 函数 
绘图 函数 如 表 3-22 所 示 。 
表 3-22 绘图 函数 





















































函数 名 称 功 能 
hintonw 绘制 权 值 年 阵 的 Hinton 图 
hintonwb 绘制 权 值 矩阵 科 值 亿 其 的 Hinton 图 
pletbr 绘制 网 络 采用 Bayesian 正则 化 算法 计 练 时 的 性 能 变化 曲线 
plotes 绘制 单 输入 神经 元 的 误差 曲 面 
Plotep 在 单 输入 神经 元 的 误差 曲面 上 绘制 权 值 、 阔 值 和 相应 误差 点 的 位 置 
plotpy 根据 明 标 尔 量 绘制 感知 器 的 输入 从 量 
plotpc 在 感知 器 输入 矢量 图 上 绘制 分 类 线 
plotperf 绘制 网 络 训练 过 程 中 的 性 能 变化 向 线 
plotsom 、 绘制 自 组 织 肌 射 网 络 图 
plotv 绘制 起 让 原 点 的 估量 
plotvec | 用 不 同 颜色 绘制 尔 晶 
1，hintonw 
功能 : 绘制 权 值 矩阵 的 Hinton 图 。 
格式 : 
hintonw ( W, maxw, rninw ) 
说 明 : 


hintonw 肯 数 以 方块 图 的 形式 表示 权 值 矩阵 ， 图 沾 各 方块 的 面积 正比 于 权 值 矩阵 中 相 
应 元 素 的 大 小 ， 方 块 的 颜色 表示 该 元 素 的 符号 。 其中， 红色 表示 负 权 值 ， 绿色 表示 正 权 


举 
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值 。 该 函数 的 输入 为 权 值 年 阵 双 、 最 大 权 值 maxw 和 
最 小 权 值 minw。 
例 396 根据 上 面 的 权 值 矩阵 绘制 Hinton 图 。 
W = [0.9003 -0.0280 -0.0871 0.1106; 
-0.5377 ”0.7826 -0.9630 ”0.2309; 
0.2137 ”0.5242 “0.6428 ”0.5839 ]; 
bintonw(WD) 
运行 结果 如 图 3.33 所 示 。 
参见 : hintonwb 咕 数 。 








2，hintonwb 图 3.33， 权 值 的 Hinton 疯 
功能 : 绘制 权 值 矩阵 和 闻 值 矢量 的 Hinton 图 。 
格式 : 
hintonwb( W,b, maxw, minw ) 
说 明 ， 
hintonwb 肯 数 以 方块 图 的 形式 表示 权 值 矩阵 和 岗 值 矢 基 ， 网 中 各 方块 的 面积 正比 于 术 
值 矩阵 或 疯 值 矢 量 中 相应 元 素 的 大 小 ， 方 块 的 颜色 表示 该 元 素 的 符号 ， 其 中 ， 红 色 表 示 负 
值 ， 绿 色 表示 正 值 。 该 函数 的 输入 为 权 值 钙 阵 W、 阔 值 失 量 b、 最 大 权 值 maxw 和 最 小 权 
值 minw。 
例 3.97 根据 下 面 的 权 值 矩 阵 和 阅 舍 矢量 给 
制 Hinton 图 。 
W =[0.9003 -0.0280 -0.0871 -0.1106; 
-0.5377 0.7826 -0.9630 0.2309; 
0.2137 0.5242 0.6428 0.5839 1; 
b=f0.4503 ; -0.6124 ; 033211; 
hintonwb ( W,b ); 
运行 结 朵 如 图 3.34 所 示 。 
参见 :hintonw 困 数 。 




















3，Plotbr 图 3.34 权 值 和 阔 值 的 Hinton 网 


功能 :绘制 网 络 采用 Bayesian 正则 化 算法 训练 时 的 忻 能 变化 曲线 。 
格式 : 

plotpr ( TR, name, epoch ) 

说 明 ， 


当 网 络 的 训练 函数 为 tainpbr 时 ， 可 以 利用 plotbr 函数 绘制 训练 过 程 中 网 络 性 能 的 安 化 


曲线 ， 通 数 绘制 的 曲线 包括 网 络 输出 的 方差 和 ， 各 权 值 参数 的 平方 和 以 及 网 络 中 有 效 参数 ; 
的 个 数 。 函 数 的 输入 TR 为 训练 函数 产生 的 训练 记录 : name 为 训练 函数 名 称 ， 人 缺 省 值 为 空 
字符 串 ， epoch 为 机 显示 的 训练 次 数 ， 甚 缺 省 值 为 训练 记录 的 长 度 。 了 
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例 3.98 ”假定 输入 和 输出 矢量 为 
pP= 全 1 0.1: 1 ]; 
t= sin (2*3.14159*p ) + 0.15*randn ( size (P ) 
建立 前 向 网 络 对 .上 述 数据 进行 学 习 : 
net = new 征 ([-1 1],[20.1],{ tansig，purelin }， trainbr ); 
[neb tr]= train (net, P.t); 
在 训练 过 程 中 ， 训 练 函数 将 自动 调用 plotbr 函数 绘制 性 能 变化 曲线 。 也 可 在 训练 完毕 
后 利用 下 列 语句 显示 训练 记录 : 
plotbr (tr ); 
网 络 的 性 能 变化 曲线 如 图 3.35 所 示 。 


Taining SSB 一 0.537204 
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3.35 Bayesian 正则 化 训练 时 的 网 络 性 能 变化 曲线 


4，Plotes 

功能 : 绘制 单 输入 神经 元 的 误差 曲面 。 

格式 : 

plotes(WV, BV,ES,V) 

说 明 : 

plotes 函数 可 用 米 绘制 单 输入 神经 元 的 误差 曲面 和 等 高 线 。WV 为 神经 元 可 能 的 权 值 

范围 矢量 ，BYV 为 神经 元 可 能 的 阅 值 范围 矢量 ，ES 是 由 emrsuf 北 数 计算 出 的 误差 矩阵 ， 该 

。 氨 阵 给 出 了 在 权 值 范围 矢 景 和 阐 值 范围 矢量 各 组 合 点 上 的 神经 元 输出 误差 ， V 给 出 了 三 维 
;图 形 的 视点 ， 缺 省 值 为 [-37.5, 30]。 
示例 参看 例 3.94。 
参见 ，errsurf 戎 数 。 






































但 
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5，plotep 

功能 : 在 单 输入 神经 元 的 误 竺 曲面 上 绘制 指定 权 值 、 阔 值 及 相应 误差 点 的 位 署 。 

格式 : 

人 @D h= Plotep (wb, 6) 

人 @@ hb=plotep (wb,e,h) 

说 明 : 

plotep 阴 数 订 以 在 plotes 函数 所 绘 的 图 形 上 标识 出 指定 权 值 、 疯 值 和 相 频 误 疙 点 的 位 
置 。 在 冰 数 的 输入 中 ，w 为 权 值 ，b 为 阔 值 ，e 为 误 益 ，plotep 函数 将 在 等 高 线 图 上 绘 出 对 
应 于 w 和 b 的 点 ， 在 误差 曲面 上 绘 出 对 应 于 e 的 点 ， 问 时 函数 返回 的 句柄 h 保存 了 本 次 申 
数 所 绘 各 点 的 信息 。 调 用 形式 @ 利 用 上 一 次 调用 函数 时 返回 的 句柄 h， 在 绘制 新 点 前 删除 
呈 点 。 

示例 参看 例 3.94。 

参见 ，errsurf 和 plotes 函数 。 

6，、plotpy 

功能 :根据 目标 矢量 绘制 感知 器 的 输入 矢量 。 

格式 : 

中 plotpv(PT) 

@ plotpy(P,Tv) 

说 明 ， 

pletpy 函数 用 于 绘制 感知 器 的 各 输入 矢量 ， 图 中 本 问 类 别 的 矢量 分 别 用 不 同 的 符号 标 
注 。 函 数 的 输入 P 为 感知 器 输入 矢量 第 阵 , T 是 由 0 或 1 组 成 的 二 元 目标 矢量 抢 阵 。 当 采 
用 调用 形式 四 时 ， 输 入 v = [ x_min xmax min y_max 中 的 四 个 元 素 限定 了 绘图 时 
坐标 轴 的 显示 范 角 

示例 参看 例 3. 9。 

3 了， plotpc 

功能 :在 感知 器 的 输入 矢量 图 上 绘制 分 类 线 。 

格式 :; 

人 h=piotpc(wb) 

人 h=plotpc(w,.b.h) 

说 明 ; 

plotpc 函数 将 根据 给 定 的 感知 器 权 值 和 阔 值 在 已 绘 好 的 感知 器 输入 失 量 图 上 添加 分 类 
线 。 闭 数 的 输入 w 和 bb 分 别 是 感知 器 的 权 值 和 阔 值 ， 函 数 除 绘图 外 还 将 返回 句柄 h，h 中 
保存 了 本 次 函数 所 绘 分 类 线 的 信息 。 调 用 形式 @ 四 利用 上 一 次 运行 函数 时 返 同 的 句柄 h， 在 
画 新 药 分 类 线 之 前 先 删除 看 的 分 类 线 。 

例 3.99 根据 直列 输入 矢量 和 目标 矢量 绘制 某 一 感知 器 的 输入 矢量 图 : 

p=[0011;0101 t=[10001]; 
plotpvy (p,t)， 
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然后 利用 下 面 给 出 的 感知 器 权 值 和 闭 值 绘 出 分 类 线 : 
w=[1 1] b=-04; 














Plotpc ( wb 
结果 如 图 3.36 所 示 。 
Vectors obe Classified 
15 
工 O 站 osx clasg 1 
加 十 :class2 
只 05 
0 十 @ 
0565 1 05 1 1.5 
RUD 


图 3.36 ”感知 器 的 输入 矢量 和 分 类 线 
参见 : plotpv 函数 。 


8，、plotperf 
功能 ， 绘 制 网 络 训练 过 程 中 的 性 能 变化 曲线 。 
格式 : 
Plotperf ( TR, goal narme， epoch ) 
说 明 : 
plotperf 函数 用 十 绘制 网 络 在 训练 时 的 性 能 变化 曲线 ， 如 果 训 练 中 有 验证 步骤 和 测试 步 
又 ， 本 函数 示 将 绘制 验证 性 能 和 测试 性 能 的 变化 曲线 。 函 数 的 输入 TR 为 训练 记录 ;goal 
为 网 络 性 能 日 标 ， 缺 省 值 为 NaN，name 为 训练 函数 的 名 称 : epoch 为 要 显示 的 训练 次 数 ， 
缺 省 值 为 训练 记录 的 长 度 。 
例 3.100 假定 网 络 的 输入 、 输 出 和 验证 数据 分 别 为 
P=[-104:11 
T= sin(2*3.141S9*P ); 
VV.P=P; 
VVT=T+rand (1 21)*0.1; 
， 建立 前 向 网 络 对 上 述 数据 进行 学 习 : 
net= new 企 (minmax(P),[41]{'tansig', tansig } ) 
Enet tr] = train Cneb PT [][]VV); 
; 在 调 练 过 程 中 ， 训 练 函数 将 自动 调用 plotper 函数 绘制 网 络 的 性 能 变化 曲线 ， 也 可 在 
训练 完毕 后 利用 下 列 语句 显示 训练 记录 ; 


但 
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141 
plotperf (t) 
网 络 的 性 能 变化 曲线 如 图 3.37 所 不。 
Performance 记 轴 00717501 
生 
史 
旺 
训练 性 能 曲线 
100 Epochs 
图 3.37 前 疝 网 络 训练 时 的 性 能 变化 遇 线 
9，plotsom 
功能 : 绘制 自 组 织 有 喘 射 网 络 图 。 
格式 ， 
人 D Plotsom ( pos ) 
名 plotsom ( W, D,nd) 
说 明 ， 
plotsom 函数 用 于 绘制 自 组 织 映射 网 络 图 。 在 函数 的 调用 形式 个 中 ，pos 是 网 络 中 各 神 
经 元 在 物理 空间 分 布 的 位 置 从 标 年 阵 ， 通 数 返回 神经 元 物理 分 布 的 拓扑 图 ， 图 中 每 两 个 问 


距 小 于 1 的 神经 元 以 直线 连接 。 在 孙 数 的 调用 形式 @@ 中 ,如 为 神经 元 权 值 矩 阵 ; D 为 根据 





神经 元 位 置 坐标 计算 出 的 间距 些 阵 ，nd 为 邻 域 半 径 ， 缺 省 值 为 1 函数 返回 











分 布 图 ， 图 中 每 两 个 间距 小 于 nd 的 神经 元 以 直线 连接 。 


神经 元 权 值 的 


例 3.101 构造 一 个 二 输入 八神 经 元 的 自 组 织 映 射 网 络 层 ， 网 络 的 拓扑 结构 为 长 方 


形 ， 神 经 元 间距 采用 linkdist 计算 方法 并 随机 产生 权 值 矩 阵 到 。 
Pos = gridtop (2.4); 
WW=rand(8,2); 
绘制 神经 元 拓扑 结构 图 和 权 值 失 草 ; 
Subplot ( 1, 2 1 ), Plotsom ( Pos ); 
D = linkdist( Pos ); 
subplot (1. 2, 2), plotgsom( W, DJ) 
结果 如 图 3.38 所 示 。 
参见 : newsom 和 1leamsom 图 数 。 
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外 神经 元 拓扑 结构 图 由 权 信 矢 最 
图 338 自 组 织 映 射 网 络 中 的 神经 苑 折 扑 结构 网 和 权 值 估量 
10.，plotv 
功能 ， 绘 制 起 自 原点 的 矢量 。 
格式 : 
plotv (M,t) 
说 明 : 
plotv 函数 用 于 绘制 矢量 图 ， 冰 数 的 输入 M 为 矢量 矩阵 ; t 指定 绘图 时 矢量 线 的 形状 ， 
缺 省 值 为 "';， 函数 将 绘制 M 中 的 每 一 个 列 矢 量 。 
示例 参看 例 3.102。 
141，Pplotvec 
功能 : 用 不 同 颜色 绘制 矢量 。 
格式 : 
plotvec (X,C,m) 
说 明 : 
plotvec 函数 利用 不 同 颜色 绘制 矢量 。 遂 数 辣 
的 输入 X 为 矢量 矩阵 ;C 是 表示 颜色 坐标 的 行 本 
矢量 ; mn 指定 绘图 时 矢量 的 标识 符 苇 。 通 数 将 
绘制 X 中 的 每 一 个 列 矢 量 ， 每 个 矢量 的 颜色 山 
矢量 C 中 的 对 应 元 素 确定 。 
例 3.102 ”绘制 下 列 矢 量 ， 一 03 
w=[-04 07;-05 0.1]; 一 04 
piotv(Cw，- ' 少 一 05 
Blotvec (w 一 05 0 0.5 1 
axis ([-05 1 -06 0.2]); 
结果 如 图 3.39 所 示 。 图 339 入 是 图 
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3.2.22 ”网 络 计算 函数 


网 络 计算 函数 如 表 3-23 所 示 ， 这 类 函数 用 隆 计算 网 络 的 输出 、 误 盖 等 参数 ， 一 般 由 网 
络 的 仿真 和 训练 画 数 调用 ， 而 不 必 由 用 户 调 用 。 


表 3-23 网 络 计算 函数 




































































函数 名 称 功 能 

Calea 计算 神经 网 络 的 输出 和 其 他 信和 号 

calcal 计算 神经 网 络 一 个 时 间 步 长 的 输出 

Caice 计算 网 络 各 层 的 误差 

cateei 计算 网 络 各 层 在 一 个 时 间 步 攻 的 层 误 凑 

Calcgx 计算 网 络 误 莽 对 于 权 值 和 阅 值 的 梯度 ， 并 用 单 - . 父 寻 表示 
[上 catcjej 计算 网 络 雅 可 比 拓 阵 的 电 个 相关 估量 ] 

calcix 计算 性 能 函数 对 于 权 值 和 阅 值 的 雅 可 比 矩 隆 

calcpg 计算 网 络 的 延迟 输入 

caleperf 计算 网 络 的 输出 和 性 能 

fomx 将 网 络 记 有 的 权 值 和 间 值 组 成 一 个 多量 

etx 以 多 草 形 式 获得 网 络 所 有 的 权 值 和 阔 值 

setx 用 - -个 僚 量 设置 网 络 所 有 的 权 值 和 阅 值 

上 ，calca 

功能 ， 计 算 神 经 网 络 的 输出 和 其 他 信号 。 

格式 : 

[Ac N,LWZ,TWZ, BZ1= calca fnet Pd Ai Q, TS ) 

说 明 : 


calca 函数 根据 网 络 输入 和 各 发 初 始 延 巡 条 件 计算 网 络 每 层 的 输出 。 函数 的 输入 net 
为 神经 网 络 对 象 ，Pd 为 网 络 的 延迟 输入 ;Ai 为 各 层 的 初始 延 巡 条 件 : Q 为 批 处 理 数据 的 
个 数 ，TS 为 时 间 步 数 。 函 数 的 返 问 量 Ac 是 由 Ai 和 各 层 输出 构成 的 混合 输出 ，N 为 各 层 
神经 元 传递 郊 数 的 输入 ，LWZ 为 各 层 的 加 权 输 出 ，IWZ 为 各 层 的 加 权 输 入 ，BZ 为 当前 
阅 值 。 

2，calcal 

功能 ， 计 算 神经 网 络 一 个 时 间 步 长 的 输出 。 

格式 : 

[ Ac, N, LWZ, TWZ, BZ ] = calcal ( net, Pd, Ai， ) 

说 明 : 

ealcal 函数 根据 网 络 输 入 和 各 层 初始 延迟 条 件 计算 网 络 每 层 一 个 时 间 步 长 的 输出 ， 本 ; 
郑 数 主要 用 在 tmains 函数 中 。 冰 数 的 输入 net 为 神经 网 络 对 象 ，Pd 为 一 个 时 间 步 长 的 延迟 
输入 ，Ai 为 各 层 的 初始 延迟 条 件 ，Q 为 批 处 理 数据 的 个 数 。 函 数 的 返回 量 A 为 该 时 间 步 
长 后 网 络 各 层 的 输出 ，N 为 各 层 神经 元 传递 函数 的 输入 ，LWZ 为 各 层 的 加 权 输 出 ，IWZ ; 
为 各 层 的 加 权 输 入 ，BZ 为 当前 阅 值 。 ; 
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3，calce 

功能 ， 计 算 网 络 各 其 的 误 美 。 

格式 : 

El = calce (net Ac,TLTS) 

说 明 : 

calce 函数 根据 网 络 各 层 的 输出 和 目标 矢量 计算 每 层 的 误差 。net 为 神经 网 络 对 象 ，Ac 
为 各 层 的 混合 输出 ，TI 为 各 层 的 目标 矢量 ，TS 为 网 络 工作 的 时 问 步 数 。 函 数 返 回 各 层 的 
误 竺 El。 

4，calcel 

功能 ;计算 网 络 各 层 在 一 个 时 间 步 长 的 其 庶 盖 。 

格式 : 

El = calcel (net Ac, T1) 

说 明 : 

calcel 函数 根据 网 络 各 层 . -个 时 间 步 长 的 输出 和 日 标 矢 基 计算 每 层 的 误 益 ， 本 函数 主 
要 用 在 trains 曾 数 中 。 本 函数 的 输入 net 为 神经 网 络 对 象 ，Ac 和 TH 分 别 为 各 层 一 个 时 间 步 
长 的 混合 输出 和 目标 矢量 。 函 数 返 问 各 层 的 误差 Bl。 

和 calc8gXx 

功能 : 计算 网 络 误差 对 十 权 值 和 岗 值 的 梯度 ， 并 几 单 一 矢量 表示 。 

格式 ， 

[ gX, normgX ] = calcgx ( net, X, Pd BZ, TWZ, LWZ, N, Ac， EL per Q,TS ) 

说 明 : 

calcgx 函数 用 于 计算 网 络 误 状 对 于 到 值 和 闭 值 的 梯度 。 本 国 数 的 输入 net 为 神经 网 络 
对 象 ，X 为 权 值 和 浆 值 组 成 的 矢量 ，Pd 为 延迟 输入 ，BZ 为 当前 阅 值 ，IWZ 为 加 权 输 入 ， 
LWZ 为 各 层 加 权 输 出 ，N 为 各 层 神经 元 传递 冰 数 的 输入 ，Ac 为 各 层 的 混合 输出 ， 了 Bl 为 各 
层 的 误 养 ，perf 为 网 络 的 性 能 ，Q 为 当前 批 处 理 数 据 的 个 数 ，TS 为 网 络 工作 的 时 间 步 数 
函数 返回 量 gX 为 网 络 性 能 对 权 值 和 阔 值 的 梯度 dPerffdX，normgX 为 习 度 的 范 数 。 

6、calcjejj 

功能 ， 计 算 网 络 雅 可 比 敌阵 的 两 个 相关 矢量 。 

格式 ; 

[je, 计 normje ] = calejejj (neu Pd, BZ, TWZ,LWZ, N, Ac, EL Q, TS, MR ) 

说 明 ; 

calcjeij 函数 用 于 计算 两 个 和 网 络 雅 可 比 矩 阵 有 关 的 矢量 ， 即 雅 可 比 矩阵 和 误差 的 乘积 





以 及 雅 可 比 矩 路 的 平方 ， 这 两 个 矢量 将 用 来 计算 网 络 训练 时 贡 用 的 Hessian 矩阵 。net 为 神 





经 网 络 对 象 ，Pd 为 延迟 输入 ，BZ 为 当前 阔 值 ，IWZ 为 加 权 输 入 ，LWZ 为 各 层 加 权 输 出 ， 
N 为 各 层 神经 元 传递 另 数 的 输入 ，Ac 为 各 层 的 混合 输出 ，EI 为 各 层 的 误差 ，perf 为 网 络 的 
性 能 ，Q 为 当前 批 处 理 数据 的 个 数 ，TS 为 网 络 丁 作 的 时 间 步 数 ，MR 为 内 存 节省 因子 。 函 


朝 
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数 返 加 是 je 为 雅 可 比 缸 阵 和 误差 的 乘积 : 五 为 雅 可 比 托 阵 的 平方 ， 即 雅 可 比 挎 阵 的 转 置 和 
它 本 身 的 内 和 :normje 为 天 量 je 的 范 数 。 

7，calcjx 

功能 :计算 性 能 函数 对 于 权 值 和 岗 值 的 雅 可 比 矩 阵 。 

格式 ， 

谎 =calcjx tneb Pd BZ,. TIWZ,LWZ.N, Ac Q,.TS) 

说 明 : 

calcjx 通 数 用 于 计算 性 能 函数 对 二 权 值 和 网 值 的 雅 可 比 和 矩阵。 函数 的 输入 net 为 神经 网 
络 对 象 ，Pd 为 延迟 输入 ，BZ 为 当前 阔 值 ，IWZ 为 加 权 输 入 ，LWZ 为 各 层 加 权 输 出 ，N 为 
各 层 神 经 元 传递 函数 的 输入 ，Ac 为 各 层 的 混 舍 输出 ，Q 为 当前 批 处 理 数据 前 个 数 ，TS 为 
网 络 工作 的 时 间 步 数 ， 函 数 返 口 网 络 的 雅 可 比 和 矩阵 江 。 

8，、calcpd 

功能 : 计算 网 络 的 延迟 输入 。 

格式 : 

Pd = calcpd ( net TS, Q, Pc) 

说 明 ; 

calcpd 盟 数 用 二 计算 网 络 的 延迟 输入 ， 它 是 由 网 络 输入 和 初始 输入 延迟 条 件 共 问 确定 
的 。 疯 数 的 输入 net 为 神经 网 络 对 象 ，TS 为 网 络 工作 的 时 间 步 数 ，Q 为 当前 批 处 理 数据 的 
全 数 ，Pc 为 混合 输入 。 藉 数 返 回 网 络 的 延迟 输入 Pd。 

9，calcperf 

功能 : 计算 网 络 的 输出 和 性 能 。 

格式 : 

[perf, EL Ac, N, BZ, IWZ.LWZ ]= calcperf Cnet, , Pd, IT, AiQ,TS) 

说 明 : 

calcperf 函数 用 于 计算 网 络 的 性 能 。 函 数 的 输入 net 为 神经 网 络 对 象 ， 闪 为 权 值 和 疯 值 
组 成 的 矢量 ，Pd 为 延迟 输入 ，Tl 为 各 层 的 日 标 矢量 ，Ai 为 各 层 的 初始 输入 条 件 ，Q 为 当 
前 批 处 理 数据 的 个 数 ，TS 为 网 络 下 作 的 时 间 步 数 ，Pe 为 混合 输入 。 函 数 返回 晶 perf 为 网 
络 的 性 能 ，El 为 各 层 的 误差 ，Ac 为 各 层 的 混合 输出 ，N 为 各 层 神经 元 传递 函数 的 输入 ， 
BZ 为 汉 前 阐 值 ，IWZ 为 加 权 输 入 ，LWZ 为 各 层 加 权 输 出 。 

10，formx 

功能 : 将 网 络 所 有 的 权 值 和 阅 值 组 成 一 个 矢量 。 

格式 ， 

X=formx (net,B, IW,LW) 

说 明 : 

formx 函数 将 神经 网 络 对 象 中 所 有 权 值 参数 和 闭 值 参数 组 合成 一 个 矢量 。 函 数 输 入 net 
为 神经 网 络 对 象 ，B 为 各 阔 值 参数 ，IW 为 各 输入 权 值 参数 ，LW 为 各 层 的 网 络 权 值 ， 状 数 
返 问 由 各 权 值 和 赋值 构成 的 矢量 X。 
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春 见 ;getx 和 setx 函数 。 

4。 getX 

功能 :以 矢量 形式 获得 网 络 所 有 的 权 值 和 阔 值 。 

格式 : 

和 = getK(net) 

说 明 ， 

getx 函数 用 于 获得 网 络 的 权 值 和 赣 值 。 函 数 输入 神经 网 络 对 象 net， 返 回 由 各 权 值 和 
阐 值 构成 的 矢量 X。 

参见 : formx 和 setx 函数 。 

12. setx 

功能 ; 用 一 个 矢量 设置 网 络 所 有 的 权 值 和 说 值 。 

格式 ， 

pnet = SetX X, net ) 

说 明 ， 

setx 函数 用 于 设置 网 络 的 权 值 和 阔 值 。 阁 数 输入 为 神经 网 络 对 象 net 和 权 信 / 闭 值 矢量 
X: 肯 数 返回 已 设置 好 权 值 和 说 值 的 网 络 对 象 。 

参见 :formx 和 getx 图 数 。 
























































3.2.23 ”矢量 函数 
矢量 函数 如 表 3-24 所 示 。 
表 3-24 矢量 函数 
函数 名 称 功能 
人 ”cell2mat 将 怎 阵 构 成 的 单元 数组 组 合成 和 阵 
combvec 建立 欠 量 所 有 组 合 的 矩 仁 
con2seq 将 并 行 父 量 转变 为 申 行 尔 量 
cone 复制 阅 信 和 汞 量 并 构成 矩阵 
ina2vee 将 F 标 僚 重 转变 为 单 值 矢 最 组 
mat2cell 将 矩阵 分 红 为 由 子 炬 阵 构成 的 单元 数组 | 
inmax 孙 短 阵 每 行 的 范围 
nome 正则 化 矩阵 的 列 
nommr 正则 化 矩阵 的 行 
Paome 全 正则 化 拒 舍 的 列 
quant 将 实数 量化 为 某 ， 数 值 的 整数 倍 
seq2eon 将 中行 矢量 转变 为 并 行 矢量 
: Somsdqr 求 撼 阵 的 平方 和 
: 上 | 村 单 什 从 重组 转化 为 下 标 秋 基 





人 
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1 ceil2mat 

功能 : 将 矩阵 构成 的 单元 数组 组 合成 矩阵 。 

格式 ; 

Im = cell2mat(c) 

说 明 : 

cell2mat 未 数 可 以 把 矩阵 构成 的 单元 数组 重组 为 握 阵 。 亏 数 的 输入 “ 是 一 个 单元 数 





组 ， 函 数 返 回 由 *e 中 各 元 素 构成 的 矩阵 。 
例 3.103 
c={0][3]; 4; 了 [8: 甸 }; 
Im = celt2mat(c ) 
im = 
1 3 
村 8 
了 9 
参见 : mat2cell 函数 。 
2.，combvec 
功能 ， 建 立 矢 量 所 有 组 合 的 矩阵 。 
格式 : 
引 =Ccombyec(al,a2，…，aN) 
说 明 : - 
combvec 函 数 将 建立 输入 矩阵 al 到 aN 中 各 列 矢 量 的 所 有 组 合 ， 并 返 困 由 这 些 组 全 构成 
的 矩阵 。 
例 3.104 
al=「[1245]; 
a2=[78]; 
a3 = combyvec (al, a2) 
3a3= 
于 2 
4 5 
了 了 
8 8 
3、，、con2seq 
功能 ;将 并 行 矢 量 转变 为 曲 行 矢量 。 
格式 


人 s= con2seq(b) 
@ s= con2seq(b,TS) 








148 基本 MATLA8B 6.x 的 系统 分 析 与 设计 一 一 神经 网 络 | 





说 明 :， 
在 神经 网 络 了 闪 箱 中 ， 秆 阵 册 本 存储 神经 网 络 的 并 行 输入 矢量 ， 单 元 数组 用 于 存储 网 
络 的 串 行 输入 从 量 。con2seq 贞 数 可 以 实现 网 络 并 行 输入 矢量 到 趾 行 输入 矢量 的 转换 。 
在 函数 的 调用 形式 GD 小 ， 丽 数 输入 矩阵 b， 返 回 单元 数组 s，s 中 的 每 一 个 元 素 为 失 阵 
b 的 列 失 量 。 在 函数 的 油 用 形式 @ 中 ， 冰 数 输入 b 为 YX1 维 单元 数组 ，b 中 的 每 一 个 元 素 
是 由 MXxS38 列 并 行 输入 和 失 大 构成 的 年 阵 ，78 为 网 络 的 工作 步 数 ， 函 数 返 加 NX TS 维 单元 
数组 s，s 中 的 每 元素 站 由 1 列 并 行 输入 秋 量 构成 的 年 阵 。 
例 3.105 
plL=[1421]: 
B2=con2seq (pl ) 
p2= 








[] [4 网 
参见 : seq2con 和 concur 半数 。 
4.， concur 
功能 ， 复 制 疝 值 失 量 并 构成 算 阵 。 
格式 ， 
concur(B,Q ) 
说 明 : 
concur 孜 数 的 输入 B 为 阔 值 矢量 ，Q 为 复制 次 数 ， 函 数 返 回 的 矩 了 是 出 Q 个 厌 阔 值 失 
量 构 成 的 矩阵 。 - 


例 3.106 
b=f13; 3 下 
concur (b,2) 
ans 二 
1 1 
3 3 
参见 : seq2con、con2seq、netsum、netprod 和 sim ind2vec 郑 数 。 
5 ind2vec 
功能 : 将 下 标 矢 量 转变 为 单 值 失 量 组 。 
格式 : 
vec=ind2vec (ind ) 
说 明 : 


ind2vec 基 数 的 输入 ind 是 表示 类 别 的 下 标 夭 量 ， 杖 数 返回 稀 朴 矩阵 vec， 该 稀 朴 生 阵 


: 中 的 每 -人 询 具 有 一 个 1，1 的 位 置 由 ind 往 定 。 


例 3.107 
ind=[132]; 
vec= ind2vec (ind) 
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Yec = 

人.D) 

(分 

人 (2.3) 
参见 : vec2ind 通 数 。 
6 mat2cell 
功能 ;将 矩阵 分 裂 为 册子 矩阵 构成 的 单元 数组 。 
格式 ， 
cell = mat2cell (my mc) 
说 明 : 


1 


mat2cell 半数 对 输入 矩阵 m 进行 分 裂 ， 分 裂 后 各 子 矩阵 的 行 数 由 矢量 决定 ， 列 数 由 


矢量 e 决定 。 肖 数 返 癌 由 各 子 和 矩阵 构成 的 单元 数组 cell。 
例 3.108 
M=[123;， 5S67;101112]; 
C= mat2cell( M,[E2],[21]) 
C= 
[1x2 double] 
f2x2 deuble] 
参见 ;cell2mat 插 数 。 
7，minmax 
功能 : 求 矩阵 每 行 的 范围 。 
格式 : 
Pr= minmax (P) 
说 明 : 
minmax 函数 求 取 输 入 扎 阵 p 中 每 一 行 矢量 的 取 值 范围 
大 值 构成 的 范围 短 阵 pr。 
例 3.109 
p=[0124;-1-2-050]; 
pr = minmax(p) 


[ 3] 
[2xl double] 


Pr = 
0 4 
2 人 
8，normc 
功能 :正则 化 所 阵 的 列 。 
格式 : 


nm=normnc(my) 





， 并 返回 由 各 行 中 最 小 值 和 最 
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说 明 : 
norme 函数 对 其 输入 矩阵 mm 进行 正则 化 ， 函 数 返回 的 正则 化 先 阵 na 与 原始 矩阵 维 数 相 
同 ， 镍 阵 每 一 卯 元 素 的 平方 和 变 为 1， 位 各 元 素 之 间 的 比例 不 变 。 
例 3.110 
m=[12;34] 


n= normnctm) 





了 = 
0.3162 人 0.4472 
0.9487 0.8944 
参见 : normr 国 数 。 
9 normr 
功能 : 正则 化 定 阵 的 行 。 
格式 : 
mn=normrtm ) 
说 明 : 
normtr 函数 对 其 输入 矩阵 m 进行 直 则 化 、 天 数 返回 的 正则 化 插 阵 n 4 与 原始 矩阵 维 数 相 
问 ， 挎 阵 每 一 行 元 素 的 平方 和 变 为 1， 但 各 元 素 之 间 的 比例 不 变 。 














例 3.111 
m=[12;3 了 4 
n=normr(my) 
D= 


0.4472 ”0.8944 
0.6000 ”0.8000 

参见 : normc 函数 。 

10，、FBmnorme 

功能 : 伪 正 则 化 矩阵 的 列 。 

格式 : 

n= pnormnc (mr) 

说 明 : 

pnorme 函数 通过 对 输入 矩阵 mm 的 每 一 列 添加 个 元 素 得 到 伪 正 则 化 矩阵 n，m 中 每 一 

列 元 素 的 平方 和 等 于 输入 参数 了 的 平方 。 
例 3.112 
m=[12;34] 


na=pnormc(m,6) 





mn 一 
1.0000 2.0000 
3.0000 4.0000 
5.0990 4.0000 
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参见 : norme 和 normr 通 数 。 
11，quant 
功能 ， 将 实数 量化 为 某 -- 数 值 的 曲 数 倍 。 
格式 : 
quant(x,q) 
说 明 : - 
quant 函数 将 撮 阵 x 中 的 侍 个 元 素 离散 化 为 量化 因子 9 的 最 近 整 数 倍 。 
例 3.113 
x= [1.533 4.756 -3.697]; 
y= quant{ x,0.1) 


1.5000 4.8000 -3.7000 
12.seq2con 
功能 :将 串 行 估量 转变 为 并 行 矢量 。 
格式 : 
b = seq2con(s) 


说 明 : 
在 神经 网 络 工具 箱 中 ， 知 阵 用 于 存储 神经 网 络 的 并 行 输入 矢量 ， 单 元 数组 用 十 存储 网 
络 的 串 行 输入 矢量 。seq2con 函数 可 以 实现 网 络 串 行 输入 矢量 到 并 行 输入 失 量 的 转换 。 


函数 输入 s 为 NX TS 维 单 元 数组 ，s 中 的 每 一 个 元 素 是 出 M 列 矢量 构成 的 矩阵 。 函 数 
返回 MX1 维 的 单元 数组 b，b 中 的 伍 - .个 元 素 是 由 MX TS 列 并 行 输入 矢量 构成 的 矩阵 。 
例 3.114 
pPL={142); 
p2 =seq2con (pl ) 
P2 = 
[lx3 doublel 
由 上 述 结果 可 见 ， 单 元 数组 p2 中 的 惟一 元 素 是 一 个 LIX 3 维 算 阵 ; 
p2{1 
ansg 二 
1 4 2 
参见 :con2seq 艇 数 。 
13. sumsgr 
功能 : 求 拷 阵 的 平方 和 。 
格式 : 


Sumsqr (Im ) 
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说 明 : 
sumsqr 函数 用 来 求 到 罗 数 输入 敌阵 mm 中 各 元 素 的 平方 和 。 
例 3.115 
5=sSumsqr(f12;341) 
S 一 
30 
14，vec2ind 


功能 :将 单 值 矢量 组 转化 为 下 标 和 失重 。 
格式 ; 
ind= vec2ind ( vec ) 
说 明 : 
vec2ind 函数 的 输入 vec 为 稀 玻 所 阵 ， 该 矩阵 的 每 列 中 只 有 一 个 1，1 的 位 置 决定 了 上 
数 返 回 矢 量 ind 中 各 元 素 的 值 。 
例 3.116 
vec=[1 0 0 0 
0010 
0 101 
ind = vec2ind (vec) 





上 


ind = 
1 3 2 3 
参见 ，ind2vec 函数 。 


3.3 基于 GUI 的 神经 网 络 设计 与 分 析 


赂 形 用 户 界 面 GUI (Graphical User Interfaces) 足 MATLAB 6.x 神经 网 络 工具 箱 的 新 增 
功能 。 借 助 丁 GUI， 用 户 可 以 比 直接 利用 工具 箱 肯 数 更 快捷 和 方 使 地 完成 神经 网 络 的 设计 
与 分 析 。 本 节 我 们 将 在 介绍 神经 网 络 设 计 与 分 析 GUI 的 直 本 功能 的 基础 上 ， 以 某 一 BP 网 
络 的 设计 为 例 给 出 利用 GULI 进行 神经 网 络 设计 和 分 析 的 基本 过 程 和 方法 。 


3.3.1 ”神经 网 络 设计 GUI 的 基本 功能 


在 MATLAB 命令 窗口 键入 mntool 命令 即 训 进入 如 图 3.40 所 示 的 神经 网 络 设计 GUI 的 
主 界面 一 一 网 络 /数据 管理 窗口 。 
: 图 3.40 所 示 的 GUI 主 界 面 简 洗 明 了 ， 从 中 可 以 清楚 地 看 出 该 窗口 记 能 实现 的 主 归 蕊 
; 能 。 其 中 ， 欠 面 中 各 列表 框 分 别 用 于 显示 神经 网 络 设计 中 使 用 或 产生 的 变量 和 网 络 对 象 
Networks and Data 区 的 各 按钮 主要 用 土生 成 和 管理 上述 变量 和 网 络 对 象 数 据 : Networks 
only 区 的 按钮 则 主要 用 于 完成 神经 网 络 的 初始 化 、 仿 真 和 训练 。 各 部 分 的 其 体 功能 如 表 
;3.25 所 示 。 


淮 
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图 3.40 神经 网 络 设计 OUE 二 界面 


表 3.25 神经 网 络 设计 GUI 主 界面 的 功能 列表 






























































项 员 功能 
Inputs 列表 禁 显示 神经 网 络 训练 所 使 用 的 输入 数据 变 昌 
Targets 列表 禁 显 朱 神经 网 络 训练 所 使 用 的 日 标 输出 变 旦 
Outputs 列表 框 显示 神经 网 络 的 实际 输出 变量 
Errors 列表 样 显示 神经 网 络 的 误 其 灾 量 
Input Delay States 列表 框 显示 具有 输入 尼 延 迟 神经 网 络 的 延迟 状态 变 弗 
Layer Delay States 列表 框 显示 具有 网 络 层 延 迟 神经 网 络 的 延迟 芍 态 变 册 
Networks 列表 框 显示 神经 网 络 对 象 
New Data 按钮 创 娃 新 的 数据 变量 
New Network 按钮 世 建 新 的 神经 网 络 对 象 
Impert 按钮 从 工作 室 卫 或 文件 导入 变 晶 成 神经 网 络 对 象 的 数据 
Export 按 钊 将 所 选 变 大 或 神经 网 络 对 象 的 数据 导出 全 工作 空间 或 文件 中 
View 按 包 查看 变量 数据 或 神经 网 络 对 象 的 结构 图 
Delete 按钮 删除 所 人选 变 攻 或 神经 网 络 对 象 
Initialize 按钮 对 所 选 神经 网 络 对 象 进行 初始 化 
Simulate 按钮 对 所 选 神经 网 络 进行 仿生 
Train 按钮 对 所 选 神经 网 络 进行 批 党 式 训练 
Adapt 按钮 对 所 选 神经 网 络 进行 渐进 式 训练 








Help 按钮 





打 丘 GUI 帮 巧 文件 
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3.3.2 ”基于 GUI 的 神经 网 络 设计 与 分 析 的 基本 方法 


果 数 拟 合 是 神经 网 络 的 重要 应 用 之 一 。 本 节 我 们 将 利用 GUI 设计 一 个 BP 网 络 ， 使 其 
能 够 以 较 高 的 精度 拟 合 所 给 的 正 疼 曲 线 样 本 数据 ， 日 的 是 使 读者 对 利用 GUI 进行 神经 网 络 
设计 和 分 析 的 基本 步骤 和 方法 ， 以 及 GUI 各 部 分 的 二 能 有 个 大 体 的 了 解 。 对 于 利用 GUI 
进行 其 他 网 络 的 设计 过 程 这 里 不 再 袭 述 。 

例 3.117 ”设计 一 个 王 层 BP 网 络 〈 输 入 、 
输出 层 神经 元 数 均 为 1， 中 间 层 神经 元 数 口 
定 )， 使 其 能 够 拟 合 如 图 3.41 所 示 的 正弦 暴 线 
样 木 数据 【图 中 以 * 号 表示 )， 上 且 拟 合 均 方 和 误 
差 mse 不 超过 0.001 。 

利用 GUI 设计 该 三 层 BP 网 络 的 基本 方法 
如 下 : 

(D 定义 神经 网 络 济 练 样本 〈 输 入 矢量 和 有 让 于 革 让 语 全 
标 矢量 ) 数据 。 

对 于 函数 拟 合 问题 ， 神 经 网 络 的 训练 样本 白 然 症 取 待 拟 合 的 样本 数据 ， 其 中 ， 输 入 矢 
量 取 正弦 曲线 的 横 坐 标 样本 数据 ， 目 标 失 量 则 取 相 应 的 纵 坐 标 样 本 数据 。 图 3.41 所 示 的 样 
本 数据 ， 可 以 通过 如 下 语句 获得 ; 

输入 矢量 : p=-1:0.11:1; 
日 标 矢 量 : t= sin(2*pi*ph) 

(2) 将 训练 样 洒 数据 导入 GUI。 

在 GUI 中 生成 神经 网 络 训练 样本 数据 可 以 采取 两 种 途径 ， 一 种 是 通过 点 击 New Data 
按钮 在 GUI 的 弹出 窗口 中 直接 输入 和 定义 ， 另 -种 方法 则 是 预先 在 工作 空间 或 文 件 中 生成 
好 所 需 的 数据 ， 然 后 通过 点 击 Import 按钮 导入 GUI 中 。 

对 于 第 一 种 方法 ， 在 点 击 New Data 按钮 后 ， 则 弹出 如 图 3.42 所 示 的 窗口 界面 。 利 用 
该 愉 面 读者 可 以 方便 地 创建 新 的 数据 变 苦 ， 包 插 变 量 的 名 称 、 内 容 和 类 型 等 。 但 是 ， 出 于 
在 Value 文本 框 中 只 能 输入 失 量 或 抵 阵 数据 ， 显 然 这 对 于 创建 维 数 和 数据 量 较 大 的 变量 来 
说 是 不 太 方 使 的 ， 对 于 这 种 情况 ， 我 们 可 以 采用 后 一 种 方法 来 创建 数据 变量 。 

对 于 第 种 方法 ， 读 者 必须 首先 在 工作 
空间 或 文件 中 定义 好 所 需 的 数据 。 如 前 所 ET 革 





















































靖 失 二 TbabTpe 一 一]| 
述 ， 可 以 在 MATLAB 工作 空间 中 输入 如 下 语 je | ep 
名 来 产生 输入 矢量 和 日 标 矢 量 : os 
p=-1:013:1; 办 = 国 sed 芭 
t=sin(2*#pisp); 由 | oa 
; 同时 ， 借 助 十 save 命令 可 以 将 生成 的 数 | GE 
# 据 变量 保 在 至 数据 文件 中 : | oa es 
2 Save datap 。 2 
1 这 样 ， 输 入 矢量 p 和 目标 矢量 + 均 保存 至 数据 间 342 “创建 新 的 数据 变 导 的 四 下 


* 介 
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文件 data-mat 中 了 。 
在 GUI 主 界面 中 ， 点 击 Import 按钮 ， 即 弹出 如 图 3.43 所 示 的 界面 。 


Source | 
Importyom MATLABworkspace | 
广 Lasdfom disrfle | 


TEN 


| 











图 3.43 从 了 作 空 间 战 文件 导入 数据 的 界面 
可 见 ， 在 Select a Variable 列表 框 显示 出 了 当前 工作 空间 中 的 所 有 释 量 ， 从 中 可 以 看 到 
刚才 定义 的 输入 和 失 量 p 和 目标 矢量 t。 依 次 选择 变量 p 和 t， 并 分 别 以 输入 mputs 和 日 标 
Targets 类 型 导入 。 返 回 到 主 界面 乒 ， 就 可 以 看 到 导入 至 GUI 列表 框 中 的 样本 数据 变量 
了 。 在 主 界面 列表 和 中 选择 导入 变量 p， 并 点 击 View 按钮 可 以 查看 导入 变量 的 数据 内 容 ， 
如 图 3.44 所 示 。 























图 344 导入 变量 p 的 数据 内 容 
此 外 ， 还 可 以 选择 从 文件 导入 数据 的 
方法 。 在 图 3.43 界面 中 渤 中 Load from disk ”ET 23 
file 单 选 接 钮 ， 然 后 单 击 Browse 按钮 ， 系 “让 于 和 半生 
统 会 弹出 如 图 3.45 所 示 的 打开 文件 界面 ， 
选择 并 打开 刚才 定义 好 的 数据 文件 
data.mat， 打 样 也 可 以 将 样本 数据 p 和 ft 自 
动 地 导入 到 GUI 中 ， 在 此 不 再 袭 述 。 
(3) 创建 神经 网 络 。 
在 准备 好 训练 样本 数据 之 后 ， 即 可 考区 节 RE 
竹 建 立 神经 网 络 了 。 在 GUI 主 界面 中 点 击 Eee 二 a 
New Network 按钮 ， 即 可 进入 创建 神经 网 络 疼 3.45 打开 Mat 数据 文件 的 界面 
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界面 ， 如 图 3.46 所 示 。 
在 图 3.46 所 示 界 面 中 可 以 对 神经 网 络 的 名 称 、 类 型 、 结 构 和 训练 函数 等 参数 进行 设 
置 。 对 于 本 例 ， 神 经 网 络 的 各 参数 设置 情况 参见 表 3.26。 
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图 3.46 ”创建 神经 网 络 办 而 





表 3.26 神经 网 络 的 参数 设置 


















































项 上 用 ] 内 容 

凡 络 名 称 Mynetl 

网 络 类 型 Feed-forward backprop 

和 输入 范围 [111] 

训练 函数 TRAINLM 

权 值 调节 规则 TRAINGDML 

性 能 函数 MSE 

秽 络 层 数 3 

各 层 神经 元 数目 [LI1] 

各 层 传递 峭 数 类 型 [TANSIG'、TANSIG'、'PURELIN' ] 

在 创建 神经 网 络 时 ， 可 以 随时 点 击 View 按钮 以 显示 当前 设置 的 网 络 结构 。 设 置 完 神 

经 网 络 参 数 之 后 ， 点 击 Create 按钮 即 可 生成 相应 的 神经 网 络 对 象 。 这 时 ， 在 GUI 主 界面 的 
Networks 列表 框 中 即 可 显示 当前 所 创建 的 神经 网 络 对 象 。 选 择 Mynetl 网 络 对 象 ， 点 击 
View 按钮 ， 可 以 查看 Mynetl 神经 网 络 的 结构 示意 图 ， 如 图 3.47 所 示 。 


(4)》 神经 网 络 的 初始 化 。 
; 对 于 神经 网 络 的 初始 化 ， 和 直接 调用 工具 箱 函数 生成 神经 网 络 一 样 ， 在 神经 网 络 创 建 
完成 之 后 ， 网 络 的 权 值 和 阔 值 已 进行 了 初始 化 ， 点 击 图 3.47 所 示 界 面 中 的 Weights 页 面 即 
可 显示 当前 初始 化 后 的 网 络 权 值 和 说 值 数据 。 图 3.48 中 显示 的 数据 名 为 所 创建 神经 网 络 的 
第 一 层 权 值 数据 。 用 户 可 以 直接 对 文本 框 中 的 数据 进行 编 畦 ， 点 击 Set Weight 按钮 后 则 完 
j 成 了 对 当前 神经 网 络 权 值 或 辆 值 的 修改 。 


彰 
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图 3.48 ”神经 网 络 的 权 值 和 阅 值 
(5) 神经 网 络 的 训练 。 
在 主 界面 中 选择 创建 好 的 神经 网 络 Mynetl， 然 后 点 击 图 3.48 界面 中 的 Train 项 ， 即 可 
进入 神经 网 络 的 训练 页 面 ， 如 图 3.49 所 示 。 草 练 页 面 又 分 为 三 个 分 页 面 ， 包 括 训练 信息 








图 3.49 神经 网 络 的 训练 页 面 
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Training Info、 训 练 参数 Training Parameters 和 串 选 信息 Optional Info 设置 页 面 。 艾 3.49 显 
示 的 为 训练 信息 设置 分 页面 ， 该 分 页 面 主要 完成 对 训练 样本 数据 和 训练 结果 数据 信息 的 设 
置 ， 其 中 ， 对 寺 训 练 输入 样本 数据 Inputs， 可 以 从 右 侧 的 下 拉 列 表 中 选择 已 定 义 好 的 变量 
p，Targets 项 则 选择 变量 t， 将 训练 结果 输出 Outputs 定义 为 变量 Mynell_outputs， 结 末 误 
基 Errors 定义 为 Mynetl_errors。 

点 击 Training Parameters 选项 卡 即 可 进入 训练 参数 设置 分 页 面 ， 如 图 3.50 所 和 示 。 在 该 
更 面 中 ， 除 了 goal《〈 训 练 误差 目标 ) 参数 值 设 为 0.001 外 ， 其 余 各 参数 均 取 默认 值 。 


志 =jel 寺 | 
View | Inmialze | Simulatse Train | Adapt | Welghts 1 


Trainng info 。 Training Parameters 上 optionalinto | 
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阅 3.50 训练 参数 的 设置 界面 

在 训练 中 ， 若 想 使 用 “提前 停止 ”的 方法 来 提 况 神经 网 络 的 推广 能 力 ， 则 可 以 通过 串 
选 信息 设置 分 页 面 〈 图 3.51) 为 网 络 训练 提供 所 需 的 验证 样本 数据 和 测试 样本 数据 。 对 才 
本 例 网 络 的 训练 ， 此 分 页 面 的 设置 可 以 省 略 。 
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厂 suppy optoralvaldiaton data? (Used foreary slopping formany nerorks) | 
厂 Suppy oplonaltsstng data? (Useul for estmnatng anelworks abllyio generalze ) 








和 
] 陋 人 























图 3.5t 可 选 信息 设置 多 面 


: 在 设置 完 网 络 训练 相关 数据 之 后 ， 点 击 Train Network 按钮 即 可 对 神经 网 络 进行 济 练 
; 了 了， 训练 结 果 如 图 3.52 所 示 。 由 图 3.52 可 希 ， 当 网 络 训 练 至 第 20 步 时 ， 网 络 件 能 达标 。 


少 
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网 络 训练 结束 以 后 ， 返 Il GUI 主 界面 ， 可 以 在 Outputs 和 Errors 列表 框 中 看 到 刚才 定 
义 的 训练 结果 输 山 安 量 Mynetl_outputs 和 误 莽 变量 Mynetl_errors 的 值 。 








三 区 
EEC | 
记 Perommance 刁 D000945434, Goalis 0 001 | 
| 

1 








几 3.52 网 络 训 练 误 生 变化 曲线 
(6) 神经 网 络 的 仿 盐 。 
3.$3 所 示 为 神经 网 络 的 仿真 界面 。 利 用 网 络 输入 矢量 p 可 以 对 训练 好 的 网 络 

Mynetl 进行 仿真 ， 仿 真 结果 的 输出 变量 设 为 Mynetl_outputs_sim。 同 时 ， 为 了 与 日 标 输出 

进行 比较 ， 订 以 利用 所 提供 的 月 标 矢量 t 来 计算 仿真 结果 误差 Mynetl_emor_sim。 点 市 

Simulate Network 按钮 并 返 ip| 二 界面， 此 时 在 Outputs 和 Errors 询 表 框 中 出 现 了 刚才 定义 的 

仿真 结果 变量 。 
















| etworcrrpetl 
View | inalze 。 Simulate 二 Train | Adapt 二 Weights 十 
Simulaton Data TSimulaton Resuts 一 一 =- | 
Inputs 可 | ouputs Jonen_oupus sm 下 
放 ie | 
RELayerDa [0 的 ejweaaaweeesa | 
Bupph Targets 友 | 人 4 
Tamets DR | Emors jwnen_eros_sm | 


Manager Close Simulate Nt 





疼 3.33 神经 网 络 的 仿真 页 而 
(7) 将 训练 结果 和 数据 导出 GUI。 : 
神经 网 络 设计 GUI 提供 了 方 使 的 数据 导入 /导出 苑 能 ， 吉 以 方便 地 与 MATLAB 工作 空 
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间 和 磁盘 文件 进行 数据 通讯 。 在 GUI 主 界面 点 击 Bxport 按钮 ， 则 六 出 如 图 3.54 所 示 的 
界面 。 





Setect one or more varlables_ Then [Exporf the variables | 





图 3.54 导出 数据 窗口 
由 图 3.54 可 见 ， 导 出 数据 窗口 中 显示 了 当前 GUI 中 的 所 有 灾 量 。Select Variables 多 表 
框 为 一 多 选 列 表 ， 在 选择 了 导出 变量 之 后 《如 图 阴影 所 示 )， 兰 点 击 Expor 按钮 可 以 将 所 
选 变量 导出 至 工作 空间 ， 若 点 击 Save 按钮 则 阐 出 文件 保存 对 话 枉 ， 可 以 将 所 选 变量 保 在 
至 相应 的 文件 中 。 
点 击 Export 按钮 ， 并 在 工作 空间 键入 who 命令 可 以 看 到 导出 的 数据 变量 如 下 : 





wpo 
Your vatiables are: 
Mynetl Mynetl_outputs_sim P 上 


为 了 进一步 验证 神经 网 络 的 设计 结果 ， 我 们 可 以 进一步 对 仿真 结果 作 如 下 分 析 。 在 命 
令 行 键入 如 下 命令 ， 吉 以 得 到 如 赂 3.55 所 示 的 拟 合 曲 线 。 
plot(p，t， "学 
hold on; 
plot (p，Mynetl_ouputs_sim ); 
由 图 3.55 可 见 ， 所 设计 的 神经 网 络 的 仿真 输出 较 好 地 拟 合 了 床 正弦 样本 数据 ， 设 计 结 
华 是 上 分 满意 的 。 























网 3.55 止息 数据 的 拟 全 结果 
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3.4 基于 Simulink 的 神经 网 络 设计 与 分 析 ， 


MATILAB 6.x 神经 网 络 工具 箱 提供 了 专门 用 于 在 Simulink 中 构建 和 设计 神经 网 络 的 工 
具 模 块 ， 同 时 ， 利 用 gensim 函数 还 可 以 直接 将 设计 好 的 神经 网 络 对 象 转换 成 Simulink 的 
模块 形式 ， 从 而 可 以 使 用 户 能 够 在 Simulink 中 进行 神经 网 络 的 可 视 化 仿真 。 此 外 ， 
MATLAB 6x 神经 网 络 工具 箱 中 还 新 增 了 三 个 专门 用 于 控制 系统 设计 的 模块 ， 从 而 极 大 地 
方便 了 基 上 上 神经 网 络 的 控制 系统 设计 与 仿真 。 


3.4.1 _ Simulink 神经 网 络 模块 介绍 
在 MATLAB 命令 行 键入 命令 ， 


neural 
即 可 凋 出 Simulink 神经 网 络 模块 组 ， 如 图 
3.56 所 示 。 



































在 图 3.56 中 ，Simulink 神经 网 络 模块 组 多 ] 多 | 多 | 
由 四 部 分 组 成 : 传递 函数 模块 Transfer TanaaFiaions NatnpiFinaione 。 WaitFoveions 
Functioms 、 殉 络 输 入 模块 Net Input 
Functions、 权 值 单元 模块 Weight Functions 和 鸟 | 
控制 系统 模块 Control Systems。 其 中 ， 前 三 antolSlens 
部 分 是 构建 神经 网 络 的 基本 模块 ， 控 制 系统 eaailNewssk Testsex la 本 Latan 


epyight 1092.2001 The Mathwoa ine 


模块 则 是 专门 为 构建 基于 神经 网 络 的 控制 系 
统 所 设计 的 。 下 面 分 乔 就 每 一 部 分 的 组 成 及 
功能 作 以 介绍 。 图 3.56 Simulink 神经 网 络 模块 组 

1， 传 递 函 数 模块 

双击 Transfer Function 模块 ， 即 可 显示 如 图 3.57 所 示 的 神经 网 络 传递 函数 模块 。 传 递 
函数 模块 是 构建 神经 网 络 的 基本 单元 ， 它 们 可 以 接受 矢量 形式 的 输入 ， 经 过 相应 的 运算 ， 
然后 以 相同 维 数 的 矢量 形式 输出 。 图 3.57 中 各 传递 函数 模块 的 类 型 说 明 见 表 3.27。 


国人 






仁和 岂 同 同和 左 友 
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全 三 同 过 
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图 357 神经 网 络 传递 函数 模块 
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表 3.27 神经 网 络 传递 函数 模块 的 传递 函数 类 型 说 明 














模 志 形式 传递 函数 模块 形式 传递 是 数 
说 C 
[| 竞争 传递 吧 数 专 让 闹 斯 径 癌 是 传递 函数 
compet radbas 
- 硬 限 幅 传递 明 数 师 饱和 线 注 传递 函数 








了 
吕 
全 

后 
































让- 对 称 酸 限 根 化 递 函 雪 净 对 称 侈 和 线性 传递 明 数 
hardlims Satlins 
站 凤 数 sigmoid 传递 丽 数 站 sofmax 传递 虹 数 
logsig softmax 
吧 正 线性 传递 光 数 :二 正印 Sigmoid 传递 函数 
poslin tansig 
瑟 呈 纯 线性 传递 冰 数 醒 := 角 基 传递 明 数 
puerelin kib as 














2 网络 输 入 模块 

双击 Net Input Functions 模块 ， 进 入 如 网 3.58 所 示 的 网 络 葵 入 模块 组 。 

其 中 ，netsum 模块 可 以 完成 矢量 或 矩阵 的 加 、 减 运算 ，netprod 简 块 则 可 用 来 完成 矢 
县 或 矩阵 的 乘 、 除 运算。 在 神经 网 络 设计 中 ，netsum 模块 通常 用 于 接受 神经 元 的 加 权 输 
入 矢量 和 阅 值 输入 矢量 ， 并 将 两 者 相 加 的 计算 结果 送 给 传递 函数 模块 以 进行 上 一 步 的 


运算 。 











ETTTTIRECOEGI 















































氏 加 ww 
本 是 玫 本 本 
图 3.58 网络 输入 模块 图 359 权 值 单元 异 块 


3， 权 值 单 元 模块 

双击 Weight Functions 模块 则 显示 如 图 3.59 所 示 的 权 值 单元 模块 。 

权 值 单元 模 决 主要 对 神经 元 的 输入 进行 加 权 运 算 ， 其 中 P 表示 神经 元 输入 失 量 ，w 表 
示 网 络 权 值 矢量 ，z 表示 加 权 输 出 。 根 据 不 同类 型 神经 元 的 运算 需要 ， 该 模 岂 组 共 提 供 了 
; 四 种 加 权 形 式 的 模块 ， 名 种 权 值 单元 模 喘 对 应 的 加 权 运 算 形式 见 表 3.28 所 示 。 





* 翰 
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表 3.28 ” 权 值 单元 模块 的 加 权 运 算 形式 






























































模 坎 形式 加 权 运 算 形 式 运算 原理 
“ 点 积 相 乘 z=sum(w .+p) 
dotprod 
| 欧 氏 距离 2=sum((w-p).^2).^05 
三 
Be 欧 民 距 凡 取 全 z= -sum((w-p).^2).^05 
aa - 
相 “ 标准 化 点 积 相 冬 z=w*pysum(p) 
no 
4， 控 制 系统 模块 
Simulink 神经 网 络 工具 箱 为 基于 神经 网 络 的 控制 系统 设计 提供 了 专用 的 仿真 和 设计 模 
块 。 点 击 Contol Systems 模块 则 进入 如 图 3.60 所 示 的 控制 系统 模块 组 。 控 制 系统 模块 组 主 
时 包含 了 三 种 神经 网 络 控制 系统 的 设计 模块 : 模型 参考 控制 器 模块 Model Reterence 





Controller、 反 馈线 性 化 控制 器 模块 NARMA-L2 Controller 和 神经 网 络 预测 控制 器 模块 NN 
Predictive Controller， 此 外 还 包含 了 -个 绘图 模块 Graph。 


Medal Relarenes centiellei ARMARL2 contty RN Pdiehve Contollet 


二 | 








| 


pl 


图 3.60 神经 网 络 控制 器 设计 模块 组 
由 于 上 述 三 种 神经 网 络 控制 系统 的 设计 均 涉 及 较 深 的 专业 知识 ， 所 以 这 里 不 再 对 这 三 
种 控制 模块 的 使 用 作 深入 介绍 。 本 书 47 节 给 出 了 一 个 利用 NN Predictive Controller 模块 设 
计 预 测控 制 器 的 应 用 实例 ， 以 供 有 兴趣 的 读者 参考 。 


3.4.2 ”将 神经 网 络 对 象 转换 成 Simulink 形式 


利用 gensim 上 明 数 可 以 将 设计 好 的 神经 网 络 对 象 转换 成 相应 的 Simulink 形式 ， 从 而 可 ， 
以 在 Simulink 中 进行 神经 网 络 的 可 视 化 仿真 。gensim 函数 的 调用 格式 如 下 : | 





gensimtnet，st ) 


输入 项 net 表示 神经 网 络 对 象 ，st 表示 仿真 步 长 ， 缺 省 值 为 1。 如 果 当 前 神经 网 络 对 象 
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中 不 含有 输入 或 网 络 延迟 环节 ， 则 可 将 st 设 为 -1， 表 示 对 神经 网 络 进行 连续 仿真 。 
例 3.118 定义 输入 矢量 和 目标 和 失 量 如 下 ， 
输入 矢量 : p = [05，-05，0.3，0;-0.5，05，-0.5，11] 
量 标 矢量 : tf =[2， 3，-2，-3] 
解 : 首先 ， 我 们 利用 神经 网 络 工具 箱 函 数 设计 一 个 BP 神经 网 络 ， 使 其 能 够 较 好 地 中 
配 上 面 定 义 的 输入 /输出 样本 失 量 数据 。 在 MATLAB 工作 空间 键入 如 下 命令 : 
p={-0.5，-0.5，0.3，0; -05，0.5，-0.5，1]; 
t=[2，3，-2，-3 ]; 
net = DewIff minmax(p)， [2、1]，{f tansig'、'purelin }，'tainlm 六 
net.trainParam.goal = 0.001; 
net = init ( net ); 
net = train ( net，pP，t 六 

训练 过 程 中 ， 显 示 如 下 信息 : 
TRAINLM, Epoch 0/100, MSE 6.90866/0.001, Gradient 4.66627/1e-010 
TRAINLM, Epoch 4/7100, MSE 0.000323004/0.001, Gradient 0.0967428/1e-010 
TRAINLM, Performance goal met. 

训练 结束 后 ， 利 用 sim 函数 和 样本 数据 对 训练 好 的 神经 网 络 进行 仿真 : 
y=sim(net，Pp) 
y= 

1.9984 2.9991 -1.9643 -2.9959 

由 仿真 结果 可 见 。 所 设计 的 神经 网 络 是 十 分 满意 的 。 

现在 我 们 利用 gensim 函数 将 设计 好 的 神经 网 络 对 象 转换 成 Simulink 形式 。 在 命令 行 
键入 如 下 命令 后 ， 则 弹出 如 图 3.61 所 示 的 窗口 。 
gensim《 net，-1 ); 

图 3.61 中 所 示 的 神经 网 络 模块 即 为 转换 之 后 的 Simulink 形式 。 有 兴趣 的 读者 可 以 对 生 
成 的 神经 网 络 模块 的 内 部 结构 作 一 些 探索 ， 或 许 会 得 到 一 些 有 益 的 启发 。 

下 面 ， 我 们 利用 图 3.61 所 示 系 统 对 神经 网 络 进行 仿真 。 在 输入 模块 mputl 中 将 输入 量 
P{H} 设 置 为 [0.3 ; -0.5]， 如 图 3.62 所 示 ， 点 击 开始 仿真 按钮 进行 仿真 。 图 3.63 给 出 了 示 波 
器 中 显示 的 神经 网 络 输 出 结果 曲线 ， 可 见 神经 网 络 的 仿真 输出 y{1} 与 期 望 值 -2 几乎 
重合 。 
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至 旬 基于 MATLAB 6 必 的 
章 ”神经 网 络 设计 实例 


本 章 我 们 将 绪 合 大 量 的 实例 程序 对 感知 器 神经 网 络 、 线 性 神经 网 络 、BP 神经 网 络 、 
径 向 基 函 数 网 络 、 自 组 织 网 络 和 反馈 网 络 设计 的 基本 问题 进行 详细 的 介绍 ， 使 读者 能 够 熟 
练 地 掌握 基于 MATLAB 神经 网 络 设计 的 基本 方法 。 此外， 本章 还 给 出 了 多 个 应 用 实例 以 
说 明神 经 网 络 如 何 用 于 解决 实际 问题 。 


4.1 ”感知 器 神经 网 络 的 设计 实例 


例 41 利用 感知 器 神经 网 络 解决 一 个 简单 的 数据 点 分 类 问题 : 将 四 个 数 点 分 为 两 
类 ， 一 类 代号 为 1， 另 一 类 代号 为 90。 由 于 在 直角 坐标 系 中 ， 任 何 数据 点 均 可 以 用 由 横 坐 
标 和 纵 华 标 组 成 的 二 维 矢 量 来 表示 ， 所 以 四 个 数据 点 即 构 成 了 四 个 一 维 输入 矢量 ， 即 
-05 -05 03 了 


输入 矢量 为 -[ 芒 05 -05 1.0 


目标 分 类 矢量 为 t=B 1 0 g 
解 ， 首 先 定义 输入 矢量 及 相应 的 目标 矢量 : 
了 =[-0.5,-0.5 ,03 , -0.41;-05 03, -05,.1.01 
T=[1,1,0,0]; 
待 分 类 的 数据 点 可 以 用 图 4.1 来 描述 ， 其 中 ， 代 号 为 1 的 点 用 符号 “十 ” 珍 示 ， 代号 
为 0 的 点 用 符号 “o” 表 示 。 图 4.1 可 以 通过 范 数 Pietpy 来 绘制 ， 即 
plotpv(P,TJ》 
根据 问题 的 规模 ， 感 知 器 神经 网 络 采用 具有 一 维 输入 的 单 神经 元 即 可 。 利用 冰 数 newp 
生成 感知 器 网 络 : 
net = newp(minmax(P) ,1 六 
利用 阔 数 plotpc 可 以 画 出 当前 感知 器 的 决策 这 界 : 
jinehandle = plotpc (netIWA{1} ,netb{1] 和 
: 由 于 当前 感知 器 网 络 的 权 值 向 值 均 为 零 ， 所 以 决策 边界 未 能 在 图 41 上 上 画 出 下面 
; 利用 adapt 函 玫 对 感知 器 网 络 进行 训练 ， 直至 网 络 溃 差 E 为 零 。 
E=1; 
; mm = OO: 


从 
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while(sse(E)) 

[net,y, 已 ] = adapt(net,P,T); 

0=n+l; 

perf fn)=SSe( 且 六 

多 绘制 分 类 线 

jlinehandle = plotpc ( netIW {1} ,net.b{f1) ,linehandle ); drawnow; 
end 
皇 gure; 


plot ( perf ); 钨 绘制 误 美 变化 曲线 








一 98 一 06 一 04 一 02 0 02 04 06 
PUD 


图 #$1 符 分 类 的 数据 点 
网 络 训练 结束 斤 得 到 如 图 4.2 所 东 的 分 类 结果 ， 可 见 分 类 线 已 将 两 类 数据 点 分 和 天。 图 








43 给 出 了 和 相应 的 误差 变化 曲线 。 显 然 ， 经 过 三 步 测 练 乒 ， 网 络 训练 误差 为 零 。 
Vectors ro bc Classified 
15 2 
1 2 
05 15 
吕 
” 于 
一 05 
05 
-1 
一 0806-04702 0 02 04 05 q 3 : 


PRD 
中 42 分 类 结果 图 43 误 辩 灾 化 曲线 
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经 过 训练 后 ， 网 络 的 权 值 和 闪 值 分 别 为 
册 =TPetIW{1》 
W= 
-1.2000 -0.5000 
b=netbflj Vectem tp be Cssifed 
b= 15 
0 1 
当 训 练 完 成 之 后 ， 即 可 利用 训练 好 的 感 0 
知 器 神 经 网 络 来 解决 实际 的 分 类 问题 了 , 这 全 
时 应 利用 sim 函数 来 实现 。 ? 
现在 引入 一 个 新 的 数据 点 [0.7; 1.31， 并 利 。 -%s 
用 感知 器 网 络 对 其 进行 妇 类 : 
p=[0.7;1.2]; ET 
a=simt(net,p) RD 








罗 0 图 4.4 新 的 分 类 结果 
利用 下 让 语句 将 新 的 数据 点 在 图 4.2 中 画 出 ， 并 得 到 新 的 分 类 结果 ， 如 图 44 所 示 。 

plotpv《p , a 

bold on; 

plotpv (P ,了 T》 

plotpc (net.IW{1j ,net-bfl) 
下 面 给 出 本 例 完整 的 MATLAB 程序 : 

和 Example 4.1 

久 

close al 

Clear 




















clf reset 
看 gure(gcf; 
echo om 
clc 
锡 NEWP 一 一 创建 感知 器 神经 网 络 
免 ADAPT- 一 对 感知 器 神经 网 络 进行 训练 
多 SIM-- 一 对 感知 器 神经 网 络 进行 仿真 
pause 匈 坑 任 意 键 开始 
clc 
和 了 为 输入 矢量 
P- [05 -05 03 -0 
-0.5 0.5 -0.5 于 ; 
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免 工 为 目标 矢量 
T=[11090]; 
旬 绘 出 待 分 类 的 数据 点 图 
piotpv(P.TD)， 
pause 
clc 
多 创建 感知 器 神经 网 络 
met=:aewpf[-1 1; -1 匡 ,1); 
linehandle=plotpc(neLIW{Ljnetbf1jh: 多 绘制 当前 决策 曲线 
pause 
clc 
echo off 
El n=-0; 
echo on 
cle 
久 训练 感知 器 神经 网 络 
while(sse(E) 
[netby,E]=adaptnet,P,T); 
B=n+l; 
perf(m=sse(E); 
jlinehandIe=piotpc(tnet.IW{1}netbfl},linehandle)j;drawnow'; 
end 
pause 
clc 
多 绘 插 误 差 申 线 
plotperD: 名 绘制 误差 变化 曲线 
pause 
clc 可 
驳 利用 训练 好 的 感知 器 网 络 进行 分 类 
p=f0.7;1.21; 名 新 的 类 据点 
a=sim(nebp) 
Pletpv(p,a0; 免 绘制 新 前 数据 点 
pause 
clc 
%% 绘制 新 的 分 类 结果 - 
hold on; 
piotpv(P,T): 
piotpcCnetIW{1L]net.btI]); | 
echo off 
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例 42 复杂 输入 矢量 的 分 类 问题 。 与 例 4.1 不 同 的 是 ， 该 问题 中 待 分 类 的 数据 点 为 
三 维 空间 的 点 〈 如 图 4.5)， 即 





=-t +LlL -1 +l -1 +1l1 -1 +1 
输入 矢量 为 p=|-L -1 +1 +1 -1 -1 +1l +1 
-1 -1 -1 -1 +1 +1 +L +l 


日 标 分 类 矢量 为 t=g 10011041 








向 4.5 待 分 类 的 数据 点 图 图 4.6 分 类 结果 
解 :根据 问题 的 不 同 ， 本 例 中 感知 器 网 络 结构 我 们 采用 输入 维 数 为 3 的 感知 器 神经 
元 。 由 十 输入 维 数 为 3， 所 以 神经 网 络 的 决策 边界 为 三 维 空间 的 决策 平面 。 图 4.6 和 图 47 
给 出 了 分 类 结果 图 及 网 络 训练 误差 变化 曲线 ， 图 4.8 给 出 了 在 引入 纳 个 新 的 数据 点 [0， 
-0.5,， 0.5; 1，0] 后 网 络 的 分 类 结果 ， 了 可见， 感知 器 网 络 实现 了 正确 的 分 类 。 本 例 完 整 的 
MATLAB 程序 如 下 : 
6 























5 


4 


3 


守 . 








忆 


图 47 误差 灾 化 册 线 图 4.8 新 的 分 类 结果 
狗 卫 xample 4.2 
名 
close all 
clear 
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Clf reset 
figure(gcg; 
echo on 
clc 
免 NEWP 一 一 创建 感知 器 神经 网 络 
免 ADAPT- 对 感知 器 神经 网 络 进行 训练 
旬 SIM 一 一 对 感知 器 神经 网 络 进行 仿真 
pause 多 吉 任 意 键 开 始 
clc 
色 了 为 输入 矢量 
P=[-1，1， -1，1，、-1，1 -1 1 
-5 -1，1，1 下 -1， 1 瞩 
-1 -1 -1， -1，1，1，1.、 1; 

色 工 为 目标 矢量 
T=10,1.0.0.1,10,1]; 
旬 绘 出 待 分 类 的 数据 点 图 
plotpv(P,T); 
pause 
clc 
名 创建 感知 器 神经 网 络 并 初始 化 
net=newp(minmax(P),1); 
net.inputYyeights{1,1}.initFcn='rands'; 
netbiases{f1lj.initFcn='Tramnds'; 
met=initnet; 
planehandle=piotpc(netIW{1jnetbf1y)3; 绘制 当前 决策 平面 
pause 
clc 
echo off 
了 E=1; 
D=0; 
echo on 
clc 
色 训练 感知 器 神经 网 络 
whilefsse(E)) 

[fnet,yE]=adapttnebP,T); 

n=n+l; 

Perf(o)=ssetE); 

planehandle=plotpc(netIW{1]},netb{1jplanehandle);drawnow; 
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end 
pause 
clc 
锡 绘制 误差 变化 曲线 
Piot(perb: 
， pause 
clc 
名 利用 训练 好 的 感知 器 网 络 进行 分 类 
p=f0,1-0.5.0.5;1.0]; 锡 引入 两 个 新 的 数据 点 
a=sim(nebp) 
plotpvfp,a); 双 绘制 新 的 数据 点 
pause 
Clc 
双 绘制 新 的 分 类 结果 
hold on 
plotpvP,D; 
plotpc(netITW{l1jsnetbf1); 

， echo off 

值得 注意 的 是 ， 在 神经 网 络 初始 化 时 ， 考取 不 局 的 初始 值 ， 感 知 器 神经 网 络 的 训练 结 
果 会 有 所 不 同 ， 但 经 过 训练 后 的 网 络 仍然 能 够 完成 分 类 任务 。 在 本 例 程序 中 ， 感 知 器 神经 
网 络 的 权 值 和 病 值 在 进行 初始 化 时 采用 了 随机 初始 化 函数 ， 所 以 在 每 次 运行 程序 后 ， 就 会 
得 到 不 同 的 分 类 结果 。 此 外 ， 随 着 网 络 初始 值 的 不 同 ， 训 练 所 需 前 步 数 和 误差 变化 也 不 相 
同 ， 但 不 论 何 种 结果 ， 感 知 器 神经 网 络 最 终 都 圆满 地 解决 了 分 类 问题 ， 这 说 明 该 分 类 问题 
的 解 不 只 一 个 。 

例 43 “本 例 我 们 将 说 明 奇异 输入 样本 矢量 对 感知 器 神经 网 络 训练 结果 的 影响 。 所 谓 
奇异 样本 ， 是 指 相对 于 其 他 输入 样本 特别 大 或 特别 小 的 样本 矢量 。 奇 异样 本 矢量 的 存在 会 
使 基于 常规 感知 器 学 习 规 则 learnp 的 网 络 训练 效率 下降 。 在 例 41 的 基础 上 ， 增 加 一 个 新 
的 料 本 矢量 点 [-40;100] ， 即 
-05 -05 03 -01 这 | 


钵 入 矢量 为 -| 总 05 -05 10 100 


目标 分 类 矢量 为 t= 上 100 了 


解 ， 由 于 样本 点 [40:100] 明显 不 同 于 其 他 输入 样本 矢量 ， 央 此 它 是 奇异 样本 点 。 奇 
异样 本 点 的 加 入 使 得 感知 器 网 络 的 训练 时 间 大 大 加 长 。 下 面 给 出 了 本 例 的 MATLAB 程序 
# 及 相关 的 分 类 结果 图 〔 如 图 49 一 图 4.12 所 示 )， 读 者 可 以 将 本 例 感 知 器 神经 网 络 的 训 红 效 
1 果 和 例 东 1 作 氛 比较 。 
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Veaors to be Classiiied Vector m be Claesified 
140| lo 
120 120 
100| 由 100 中 
| 80 
名 @ 
人 全 o 
2 2 
0 全 0 
一 2 一 加 
-40L_ ， -和 
二 有 一 和 一 有 一 芒 一 0 0 19 一 90 一 和 一 0 -20 -10 0 名 
RD AD 
图 49 竺 分 类 的 数据 点 向 图 4.10 分 类 结果 
Vectotsi be Cssified 
3 140 
2.5| 120 
1og| 
2 | 
60| 
1 全 0 
1 20| 
0 
05| 一 2 
OCT 90220009 有 
RD 
图 4.41 误差 变化 赐 线 图 4.12 ' 新 的 分 类 结果 
本 例 完整 的 MATLAB 程序 如 下 : 
多 Exampie 4.3 
多 
close al 
clear 
Clf reset 
fignre(gch; 
echo on 
clc 
名 NEWP 一 一 创建 感知 器 神经 网 络 


% ADAPT 一 一 对 感知 器 神经 网 络 进行 训练 
% SIM-- 一 对 感知 器 神经 网 络 进行 仿真 
pause 有 驳 蔽 任意 键 开始 





174 


基于 MATLAB 6.x 的 系统 分 析 与 设计 一 一 神经 网 络 





clc 

多 P 为 输入 矢量 

P=[-0.5，-0.5，0.3，-0.1，-40; 

-0.5，0.5，-0.5，1， 100];， 

旬 了 为 日 标 矢量 

T=[1.1.00.1]; 

免 绘 出 符 分 类 的 数据 点 图 

plotpv(P,T); 

Pause 

cic 

多 创建 感知 器 神经 网 络 

net=newp(minrmax(P),1)3 

linehandle=plotpc(netIW{Ti jnetbfly; 

pause 

clc 

echo off 

E=1; n=0; 

echo on 

elc 

% 训练 感知 器 神经 网 络 

while(sse(E)) 
[neby,E]=adapt(nebP,T); 
mi=n+1l: 
Perftn)=sse(B); 
linehandle=plotpc(netIW{Ljnetb{il jlinehandle)'drawnows 

end 

pause 

clc 

% 绘制 误差 变化 曲线 

pliot(perf); 

pause 

clc 

%% 利用 训练 好 的 感知 器 网 络 进行 分 类 

P-L20;20]; 名 新 的 数据 点 

a=sim(net',p) 

Plotpv(p,a); % 绘制 新 的 数据 点 

pause 

clc 


多 绘制 新 的 分 类 结果 
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hoid on; 

plotpv(P,T); 

plotpc(tnetIW{1}anetLbftlyy7; 

echo o 任 

例 44 感知 器 时 一 化 学 习 规则 的 应 用 。 在 例 4.3 中 ， 我 们 发 现 当 输入 样本 矢量 中 存在 

奇异 样本 时 ， 感 知 器 神经 网 络 的 训练 时 间 将 大 大 加 长 。 本 例 我 们 将 采用 第 二 章 2.2.2 节 中 
所 介绍 的 “感知 器 归 一 化 学 习 算法 ”， 即 leamnpn 函数 对 感知 器 网 络 进行 训练 ， 从 而 可 以 消 
除 学 习 训练 时 间 对 奇 措 样 本 的 敏感 性 。 


解 ， 本 例 的 程序 与 例 4.3 中 的 几乎 完全 相同 ， 只 是 要 把 例 4.3 中 的 感知 器 网 络 创建 
语句 





net=newp(minmax(P),1); 
改 为 如 下 形式 : 
net=newptminmax(P),.i,hardlim',leampn); 
图 4.13 一 图 4.16 给 出 了 感知 嚣 训练 效 有 和 分 类 结果 。 读 者 可 以 将 本 例 的 训练 效果 和 例 
4.3 的 训练 效果 作 以 比较 。( 木 俩 的 MATLAB 程序 略 》 





Vantecaiiad 本 Vecsorsiobe Chaesifed 
1 
120 
1t20 
100， 
100| 丰 
加 
习 @ 
有 & 
如 
区 
2 
0 
0 名 
-2 
一 2 
一 4 了 和 一 亲 一 有 -有 一 亲人 
和 和 10 名 
RGD 
疼 4.43 符 分 类 的 数据 点 上 图 也 4.14 分 类 结果 
Veciom mbe Chaifed 
3 140 
25 Z 
100 
2 0 
 @ 
15 
& 
1 2 
0 i 
05 0 : 
0 0 1 和 一 条 一 机 一 和 和 0 0 1 : 
RD : 
图 4.15 误 蔗 变化 曲线 加 4.16 新 的 分 类 结 梁 2: 
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例 4.5 


通过 本 例 ， 读 老 可 以 更 清楚 地 看 到 ， 





本 例 我 们 将 尝试 采用 单 层 感知 器 网 络 对 一 组 线性 不 可 分 的 数据 点 进行 分 类 。 
E 如 第 二 章 所 述 ， 单 层 感知 器 网 络 只 能 解决 线性 可 分 


问题 ， 而 对 于 线 性 不 可 分 输入 矢量 的 分 类 问题 则 是 无 能 为 力 的 。 定 义 不 可 分 点 集 如 下 : 


-05 -05 


输入 矢量 为 |- 关 


目标 分 类 矢量 设 为 





化 曲线 。 


Vectorms tobe Clasificd 


0.3 
-0.5 


t=Rl100g 
解 ， 下 面 给 出 了 本 例 的 MATLAB 程序 和 相关 的 训练 结果 图 
类 的 输入 尔 量 集 ， 图 4.18 为 感知 器 网 络 训练 后 的 分 类 结果 ， 图 








图 4.17 ”线性 不 可 分 点 集 








免 Example 4.5 

久 

close all 

clear 

clf reset 

figure(gcf; 

echo on 

clc 

多 NEWP- 一 创建 感知 器 神经 网 络 

% ADAPT 一 一 对 感知 器 神经 网 络 

进行 训练 

兄 SIM 一 一 对 感知 器 神经 网 络 进行 
仿真 

pause 台 敲 任意 键 开始 


clc 


怠 P 为 输入 矢量 


1.0 


-01 癌 ] 


0.1 




















。 其 中 ， 图 4.17 表示 待 分 
4.19 是 训练 过 程 的 误差 变 























Vectors to be Classified 





图 4.18 分 类 结果 





放 为 训 相 加 的 轴 是 和 100 


4.49 误差 变化 曲线 
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了 P=[-0.5，-0.5， 0.3，-0.1，-0.9: 
-0.5，0.3，-035，1， 0.1]; 

名 工 为 月 标 矢量 

T=[111.0.0.0]; 

多 绘 出 竺 分 类 的 数据 点 图 

plotpvy(P.T); 

Pause 

clc 

和 创建 感知 器 神经 网 络 

pet=naewptminmax(P) 1) 

linehandle-=plotpc(neLIW{1}net.b{f1})， 

pause 

clc 

名 训练 感知 器 神经 网 络 

for n=1:30 
[net,y,E]=adapt(nebP,T); 
perfon)=sse(E): 
linehandle=plotpc(neLIW{11}netb{fljPlinehandle);drawnow; 

end 

Pause 


clc 


锡 绘制 误差 变化 曲线 


blot(perp; 
echo o 任 
由 图 4.18 和 图 4.19 可 见 ， 当 训练 迁 代 至 第 100 步 时 仍 未 收 仇 ， 而 且 呈 现 出 有 规律 的 
振荡 ， 所 以 对 于 本 例 问题 采用 单 层 感知 器 网 络 是 永远 也 找 不 到 正确 分 类 方案 的 。 


4.2 ”线性 神经 网 络 的 设计 实例 


例 46” 用 直接 设计 法 设计 一 个 简单 的 线性 神经 元 ， 使 其 能 够 拟 合 如 下 所 给 的 输入 样 
本 矢量 和 目标 矢量 ， 其 中 


输入 和 失 量 为 p=[.8 - 寻 
日 标 泉 量 为 。 t=f5 革 
解 : 首先 ， 给 出 本 例 的 MATLAB 程序 如 下 ; 


铝 Example 4.6 
锡 
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Close 1 

Clear 

clf reset 

人 gure(gcf); 

echo on 

clc 

多 NEWLIN 一 一 采用 直接 法 设计 线性 神经 网 络 
多 SIM 一 一 对 线性 神经 网 络 进行 仿 真 
Pausc 饮 硕 生意 键 开 始 

Clc 

P=[0.8,-2]， 色 了 为 输入 矢量 
T-[0.5,1]; 多 了 为 目标 矢量 

久 设 定 线性 神经 元 可 能 的 权 值 和 调 值 范 
w_range=-1:0.1:1; 

hb_range=-1:0.1:1 

% 根据 输入 和 目标 矢量 绘制 线性 神经 元 的 误差 曲面 
ES=errsurf(P,Tw_range,b_range,purelin); 
Blotes(w_range,b_range.ES); 

pause 

clc 

多 用 直接 设计 法 设计 线性 神经 网 络 
net=Dnewlind(P.T); 

patse 























clc 

旬 对 线性 神经 网 络 进行 仿真 

A=simtnebP) 

旬 计算 仿真 误差 

E=T-A 

SSE=sse(E) 

pause 

clc 

% 根据 网 络 权 值 和 冰 值 在 误差 曲面 上 绘制 当前 位 置 点 

plotes(w_range,b_range,ES); 

plotep(neLEW{1,1hnetb{1}j,SSE); 

echo o 任 
在 利用 newlind 函数 设计 线性 神经 元 之 前 ， 可 以 根据 可 能 的 网 络 权 值 和 调 值 范围 ， 并 
利用 函数 errsurf 绘制 出 神经 元 的 误差 曲面 。 本 例 所 绘制 的 误差 曲面 如 图 4.20 所 示 ， 其 中 越 
: 亮 的 部 分 误差 越 小 。 图 4.20 中 所 示 的 亮点 为 网 络 设计 完成 之 后 根据 当前 网 络 权 值 和 阔 值 ， 
了 并 利用 Pilotep 函数 绘制 的 误差 位 置 点 ， 可 见 该 误差 点 位 于 误差 曲面 的 最 低 点 。 


参 
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Error Surface 


Error Contour 


BiasB 





Sum Squared Error 





1 1 WeightW 


-1 -0 0 1 
Weight W 
图 420 线性 神经 元 的 误差 遇 面 和 误差 点 
例 47 使 用 Train 函数 训练 并 设计 - -个 简单 的 线性 神经 元 ， 上 网 络 训练 样本 矢量 和 例 
46 相同 。 
解 : 本 例 的 MATLAB 程序 如 下 : 
狗 卫 xample 4.7 
驳 
Close 3ll 
clear 
clf reset 
在 gure(gcf; 
echo on 
clc 
多 NEWLIN 一 生成 一 个 新 的 线性 神经 网 络 
色 TRAIN 一 一 对 线性 神经 网 络 进行 训练 
多 SIM 一 一 对 线性 神经 网 络 进行 仿真 
pause 多 胡 任 意 键 开始 
clc 
驴 P 为 输入 矢量 
了 =[0.8, -2]; 
先 工 为 日 标 矢量 
T=[0.5, 1]; 











神经 元 可 能 的 权 值 和 阅 值 范围 
:0.2:1 
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aeroaeaatesa 


遇 


hb_range=-120.2:1; 

多 根据 输入 和 目标 矢量 绘制 线性 神经 元 的 误差 曲面 
ES=errsurf(P,T,w_range,b_range,purelin'); 
Plotes(w_range,b_range,ES); 

pause 

cic 

% 计算 最 快 的 稳定 学 习 速 率 什 
maxir=maxlinlr(P,bias) 

pause 

clc 

多 创建 线性 神经 网 络 
net=newlin(minmax(P),1,[0].0.4*smaxlr; 
狗 在 误差 曲面 上 选择 权 值 和 阔 值 对 线性 神经 元 进行 初始 化 
plotes(w_range,b_range,ES); 
subplot(1,2,2); 
EnetJW{L1}netb{f1)]=ginputtl); 

echo off 

SSE=sse(T-sim(netP)); 
h=plotep(net.IW{1,1 jaetb{ 1},SSE); 

echo on 

clc 

钨 对 线性 神经 网 络 进行 训练 
nettrainParam.goal-0.001; % 设置 训练 日 标 误差 
[nett]= trainGnebP,T); 

Pause; 

Clc 

% 在 误差 则 面 上 绘制 当前 误差 位 置 点 
SSE=sse(T-simtnetP)); 

close(gc 有 ; 

piotep(netIW{1,1 jnetb{1}SSE); 

Pause 

clc 

锡 绘制 误差 变化 曲线 

closefgcn; 

plotperfttrnettrainParam.goalD; 

pause 

clc 

免 对 线性 神经 网 络 进行 仿真 


A=sim(nebP) 
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名 计算 仿真 误 益 
E=T-A 
SSE=sse(E) 
echo of 侍 
例 4.8 利用 线性 神经 网 络 求 取 非 线性 问题 的 最 佳 线性 拟 合 解 。 前 面 已 经 知道 ， 线 性 
神经 网 络 只 能 描述 输入 、 输 出 间 的 线性 映射 关系 ， 当 输入 、 输 出 之 间 是 非 线性 关系 时 ， 利 
用 线性 神经 网 络 只 能 得 到 输入 、 输 出 间 的 最 佳 线性 拟 合 解 ， 而 不 能 实现 完全 的 线性 拟 合 。 
本 例 我 们 将 采用 线性 单 神 经 元 对 如 下 定义 的 输入 和 目标 矢量 进行 拟 合 ， 即 
输入 矢量 为 p=[ 12 3 -13] 


目标 失重 为 t=4 1 3 -05] 


解 : 由 输入 失 量 和 日 标 撩 蔡 可 见 ， 两 者 之 间 是 非 线 性 关系 ， 即 找 不 到 一 组 权 值 W 和 
阔 值 b 使 得 对 所 有 的 输入 和 日 标 样本 矢量 均 满 足 线性 表达 式 上 = 到 sp + b。 本 例 中 ， 我 们 将 
采用 newlind 函数 直接 设计 法 和 train 函数 设计 法 纳 种 方案 对 线性 神经 网 络 进行 设计 。 完 整 
的 MATLAB 程序 如 下 

儿 Example 4.8 
铬 


close ahl 








clear 

clf reset 

在 gure(gcf); 

echo on 

Clc 

免 定义 输入 和 日 标 矢量 

免 P 为 输入 矢量 

了 P=[1 1.2, 3，1.2]; 

狗 了 为 目标 矢量 

T=[0.4. 1, 3, -0.5]; 

Pause 

clc 

多 设 定 线性 神经 元 可 能 的 权 值 和 说 值 范 
W_Tange=-2:0.2:2; 

b_range=-2:0.2:23 

多 根据 和 输入 和 日 标 矢量 绘制 线性 神经 元 的 误差 曲面 
ES=errsurf(P,T,w_range,b_range,purelin7): 

















Plotes(w_range,b_range,ES)， 
Pause 
echo off 


人 
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clc 
disp(1. 采 用 NEWLIND 函数 直接 设计 线性 神经 网 络 ); 
disp(2. 采 用 TRAIN 函数 训练 并 设计 线性 神经 网 络 ); 
choice=input(' 请 选择 设计 方案 (1.2)-9; 
这 choice==1) 
echo om 
clc 
% 用 NEWLIND 函数 直接 设计 线性 神经 网 络 
net=newlind(P,T); 
pause 
clc 
锡 对 线性 神经 网 络 进行 仿真 
A=simCnetP) 
狗 计算 仿真 误 其 
E=T-A 
SSE=sse(E) 
Panse 
clc 
匈 在 误差 曲面 上 绘制 当前 误差 位 置 点 
五 gure(gcb; 
plotep(netIW{1.1jnetb{1 }SSE): 
pause 
cc 
echo of 
Clf reset 
figure(gcb); 
echo on 
cle 
饭 绘制 拟 售 曲 线 
Blot(P:T, 7 
hoid on; 
piot(P.A); 
pause 
clc 
else 
echo on 
clc 


色 用 TRAIN 函数 训练 并 设计 线性 神经 网 络 
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和 计算 最 快 的 稳定 学 习 速 率 值 
maxjlr=maxlinlr(P,bias) 

Pause 

clc 

名 创建 线 忻 神经 网 络 
het=newlin(minmax(P),1,[0].0.3*maxlr); 
名 在 误差 曲面 上 选择 权 值 和 锐 值 对 线性 神经 元 进行 初始 化 
piotes(w_range,b_range,ES); 

Subplot(1 ,2.2 
[netTW{.Tjnetb{flh]=ginput13; 

echo o 任 

SSE=sse(ET-simnetP)); 
plotepnetLIW{1l,1}jnetb{fl1j.SSE); 

echo on 

clc 

名 对 线性 神经 网 络 进行 训练 
nettrainParam.goal=0.01; 狗 设置 训练 目标 误差 
[nettr]= train(tnebP,T); 

Pause; 

clc 

多 对 线性 神经 网 络 进行 仿真 
A=sim(nebP) 

计算 仿真 误差 

E=T-A 

SSE=sse(E) 

pause 

clc 

% 在 误差 曲面 上 绘制 当前 误差 位 置 点 
Close(gcf); 
Plotep(netIW{L1}netb{1)},SSE); 
pause 

clc 

色 绘制 误差 变化 曲线 

close(gcf); 
lotperf(trnettrainParam.goal); 

pause 





clc 


多 绘制 拟 合 曲线 
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close(gcpD; 
plot(P,Tr+); 3 
hold on; 23| 
plot(P.A); 刘 
pause 移 
clc 本 
end 03| 
echo o 在 到 
实践 证 明 ， 丙 种 方案 均 未 能 达到 拟 合 0 
零 误 差 的 效果 ， 但 两 种 方案 者 得 到 了 相 问 IE 
的 最 佳 拟 合 结果 ， 图 4.21 所 示 为 拟 合 曲 上 
线 。 此 外 ， 图 4.22 给 出 了 所 设计 的 线性 神 图 421 线性 神经 元 虐 传 拟 合 田 线 
经 元 的 误差 点 位 置 。 
Eror Surface ErrorContour 







Sum Squared Emor 
Bias 昌 


0 
Weieht W 





Weight W 


图 4.22 线性 神经 区 的 误 乍 昌 面 和 误 划 点 

例 49 采用 线性 单 神经 元 解决 不 确定 性 问题 。 我 们 已 经 知道 ， 若 线性 神经 网 络 的 日 
由 度 大 于 训练 样本 集 的 个 数 ， 则 对 十 样本 匹配 问题 会 得 到 碟 穷 多 个 使 训练 误 益 为 零 的 解 ， 
我 们 称 此 类 问题 为 不 确定 性 问题 。 本 例 中 ， 采 用 线性 单 神经 元 对 如 下 样本 点 进行 匹配 ; 

输入 矢量 为 p=[0.8] 

目标 矢量 为 t= 三 121 
: 和 解 ， 册 所 给 样本 点 可 见 ， 对 于 线性 单 神经 元 ， 不 在 在 数组 权 值 W 和 阔 值 b 使 样本 点 
} 满足 线性 表达 式 t= W*p + b， 所 以 该 问题 的 解 是 不 确定 的 - 
1 本 例 的 MATLAB 程序 与 例 47 的 几乎 完全 相同 ， 只 需要 把 输入 矢量 和 目标 矢量 作 相应 
} 修改 即 可 。 通 过 选取 不 同 的 网 络 初始 权 值 和 赣 值 ， 并 利用 train 范 数 训练 和 设计 线性 神经 


从 
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元 ， 我 们 就 可 以 得 到 不 同 的 设计 结果 ， 但 不 论 何 种 结果 ， 线 性 神经 元 均 能 对 训练 样本 完全 
匹配 图 4.23 和 图 4.24 分 别 给 出 了 两 种 不 同 疫 计 的 误 竹 曲面 和 误 美 点 结果 。 可 见 ， 尽 管 
这 商 种 设计 结果 的 神经 元 所 对 应 的 误差 点 位 于 不 同 的 位 置 ， 但 都 位 于 零 误 差 带 内 。 








Emor Surface Emor Contour 


Sum Squared Emor 





Weigha W 





Weight W 


孜 423 设计 结果 工 鬼 普 逢 机 而 和 误 关 中 


Eror Contour 


Emor Surface 





Sum Squared Emor 


铬 424 设计 结 开 2 的 误 关 曲直 和 诬 关 点 
注 ， 图 中 白 点 表示 线性 神经 元 的 初始 误差 点 ， 黑 点 表示 训练 后 的 误差 点 。 
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例 4.10 对 于 例 47 同样 的 问题 ， 研 究 学 习 速 率 对 线性 神经 网 络 训练 结 课 的 滚 响 。 
解 : 在 使 用 train 函数 训练 并 设计 线性 单 神 
经 元 时 ， 如 果 采 用 比 maxlinlr 冰 数 所 计算 的 学 10 von 
习 速率 更 大 的 值 (如 采用 2.2 伴 十 最 天 学 习 速 im 
率 的 值 》 对 神经 元 进行 训练 ， 则 会 得 到 如 图 。。lon 
4.25 所 示 的 训练 误差 变化 曲线 。 可 见 ， 若 线性 
神经 元 学 习 速率 过 大 ， 则 会 导致 训练 结果 





Training -Blue 
虽 怠 





发 散 训练 误差 变化 此 线 
本 例 的 MATLAB 程序 与 例 47 的 基本 一 闻 
样 ， 只 是 要 把 下 面 的 语句 本 
net=newlin(minmax(P),1,[0].0.4*+maxlr; Di020304 和 3 和 6 70 8 0 10 
改 为 100 Epocte 
net=newlinfminpmax(P),1,[0],2.2*maxln; 角 4.25 识 符 变化 曲线 


4.3_BP 神经 网 络 的 设计 实例 


例 4.11 采用 动量 梯度 下 降 算法 训练 BP 网 络 。 训 练 样本 定义 如 下 ， 


-1 -2 3 1 
输入 和 虽 为 。 p=| -1 ， 5 3 


目标 矢量 为 t=[F1 -1 1 


解 : 本 例 的 MATLAB 程序 如 下 : 
名 Example 4.11 
狗 
Close ali 
Clear 
echo on 
cle 
多 NEWFF 一 一 生成 一 个 新 的 前 向 神经 网 络 
多 TRAIN 一 一 对 BP 神经 网 络 进行 训 练 
旬 SIM- 一 对 BP 神 经 网 络 进行 仿真 
pause ”% 坑 任 意 键 开始 
clc 
旬 定义 训练 样本 
名 了 为 输入 矢量 
了 P=[-1， -2，3， 1 
-1，1，35，-3]， 
锡 了 为 目标 矢量 
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T=[-1 -1 1 1; 
pause; 
cle 
旬 创建 一 个 新 的 前 向 神经 网 络 
aet=newftminmax(P),[3,1j ftamnsig', purelin j,tainagdm); 
% 当前 输入 层 权 值 和 疯 值 
inputWeights=netIW{1.1} 
inpltbias=net.b{i} 
名 当前 网 络 层 权 值 和 冰 值 
layerWeights=netLW{2,1]} 
layerbias=netb[f21} 
pause 
clc 
和 设置 训练 参数 
nettrainParam.show = 50; 
net.trainPparam .lt = 0.05; 
net.trainPararmamc = 0.9; 
nettainParar.epochs = 1000， 
nettrainPararn.goal = 1e-3; 
Pause 
clc 
锡 调用 TRAINGDM 算法 训练 BP 网 络 
[nettr]=train(nebP,T); 
Pause 
clc 
免 对 BP 网 络 进行 仿真 
和 =sim(nebP) 
免 计算 仿真 误差 
E=T- 信 
MSE=mse(E) 
pause 
cjc 
echo o 丰 0 一 
下 面 是 本 程序 的 某 次 训练 结果 。 9 

4.26 给 出 了 相应 的 误差 变化 曲线 ， 可 见 ， _。 

当 训 练 至 第 500 步 时 ， 网 络 作 能 达标 。 图 426 误 关 变化 由 纺 
TRAINGDM, Epoch 0/1000, MSE 1.356730.001, Gradient 3.82647/le -010 
TRAINGDM, Epoch 50/1000, MSE 0.0158379/0.001,Gradient 0.1 12933/le-010 
TRAINGDM, Epoch 100/1000, MSE 0.00588767/0.001 Gradient 0.0289309/1e-010 
TRAINGDM, Epoch 150/1000, MSE 0.00431032/0.001, Gradient 0.0208763/1e-010 
TRAINGDM, Epoch 200/1000, MSE 0.00337422/0.001, Gradient 0.0173309/1le-010 

















Performance is 0.000997831.Goal 记 0001 
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TRAINGDM, Epoch 25011000, MSE 0.00270622/0.001, Gradient 0.0149965/le-010 
TRAINGDM, Epoch 300/1000, MSE 0.00219738/0.001, Gradient 0.013245U1le-010 
TRAINGDM, Epoch 350/1000, MSE 0.0017966870.001. Gradient 0.0118326/le-010 
TRAINGDM., Epoch 400/1000, MSE 0.0014749170.001, Gradient 0.0106505/le-010 
TRAINGDM, Epoch 45071000, MSE 0.00121304/0.001, Gradient 0.00963926/ie-010 
TRAINGDM, Epoch 500/1000, MSE 0.0009978570.001, Gradient 0.00875812/1e-010 
TRAINGDM, Performance goal met. 

例 4.12 采用 I-M 优化 算法 训练 BP 网 络 。 训 练 样 本 同 例 4.11。 

解 : 本 例 的 MATLAB 程序 与 俩 4.11 的 基本 相同 ， 只 是 在 生成 前 向 网 络 时 ， 鉴 把 训练 
函数 由 traingdm 函数 改 为 rainlm 函数 。 下 面 只 给 出 本 例 网 络 的 某 次 训练 结 昌 和 误 关 变 化 
曲线 《如 图 4.27 所 示 )。 

TRAINLM, Epoch 011000, MSE 1.56314/0.001, Gradient 3.85214171e-010 
TRAINLM, Epoch 3/1000, MSE 7.18461e-00710.001, Gradient 0.00244234/1e-010 
TRAINLM, Performance goal met. 

















Periormanee is 7.18461c -007.Goalis0001 


10! 一 一 一 一 








10p 训练 误 问 变化 出 线 
站 10 
3 0 
昌 0 
10 绅 标 线 
10- 
10 环 
1 3 
3 Epochs 


图 4.27 训练 误差 变化 曲线 
将 本 例 训 练 结果 与 例 4.11 对 比 可 见 ，L-M 优化 算法 的 收 仇 速度 明显 优 于 动量 梯度 下 
降 算法 ， 而 且 L-M 优化 算法 往往 能 得 到 更 小 的 训练 误差 。 
例 4.13 采用 贝 叶 斯 正则 化 算法 提高 BP 网 络 的 推广 能 力 。 在 本 例 中 ， 我 们 采用 两 种 
训练 方法 ， 即 L-M 优化 算法 trainlm》 和 贝 叶 斯 正则 化 算法 〈trainbr)， 用 以 训练 BP 网 
络 ， 使 其 能 够 拟人 台 某 一 附加 有 有 白 噪 声 的 正弦 样本 数据 。 其 中 ， 样 本 数据 可 以 采用 如 
MATLAB 语句 生成 : 
输入 矢量 : P= 广 1:0.05:1]; 
目标 矢量 ，randn(seed',78341223); 
下 = sin(2*pi*P)+0.1#randn(size(P); 
解 : 本 例 的 MATLABR 程序 如 下 : 
免 Example 4.13 
多 
close al 
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clear 

echo on 

clc 

%NEWFEF 一 一 生成 一 个 新 的 前 向 神经 网 络 
龟 TRAIN 一 一 对 BP 神经 网 络 进行 训练 

免 SIM- 一 对 BP 神经 网 络 进行 仿真 

pause 多 散 任意 键 开始 

cle 

多 定义 训练 样本 矢量 

免 了 为 输入 矢量 

P = [0.05:1]; 

名 工 为 日 标 矢 量 

randntseed',78341223); 

T= sin(2*pi*P)+0.1#randn(size(P)); 

免 绘制 样本 数据 点 

Piot(P,T,+)， 

echo o 任 

hold on; 
plot(P,sin(2kpiyP):0; 多 绘制 不 含 噪声 的 正弦 曲线 


echo on 








clc 
pause 
clc 
名 创建 一 个 新 的 前 向 神经 网 络 
net=newfftminmaax(P),[20,1,ftansig,purelin ]》 
pause 
clc 
echo o 帮 
clc 
dispC1，L-M 优化 算法 TRAINLMT; 
disp(2， 贝 叶 斯 正则 化 算法 TRAINBRJ 
choice=input(' 请 选择 训练 算法 (1.2):7; 
figure(gcf); 
ichoice==1) 
echo on 
clc 
% 采用 IM 优 化 算法 TRAINLM 
net.trainFcn='trainlm': 
Pause 
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clc 
锡 设置 训练 参数 
net.trainParam.epochs = S00; 
net.traitnParam.goal = te 一 6; 
pet=init(neb; 铝 重新 初始 化 
Pause . 
clc 

elseif(choice 一 2) 
echo on 
cle 
旬 采用 贝 叶 斯 正则 化 算法 TRAINBR 
PettrainFcn='trainbr; 
Pause 
clc 
多 设置 训练 参数 
net.trainParam.epochs = 500; 
randn('seed',192736547)5 
net= inittaeb; 。” %% 重新 初始 化 
Pause 
clc 

end 

% 调用 相应 算法 训练 BP 网 络 

[nettr]=traintnebP,T); 

pause 

cle 

免 对 BP 网 络 进行 仿 真 

和 =Sim(nebP); 

旬 计算 仿真 误差 

了 =T-A; 

MSE=mse(B) 

Pause 

clc 

匈 绘制 匹配 结果 曲线 

close alt; 

plot(P,A,P.T,+,P,Sin(2*pisP)， 7 

pause; 





clc 
echo off 
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通过 采用 两 种 不 朵 的 训练 算法 ， 我 们 可 以 得 到 如 图 4.28 和 图 4.29 所 示 的 两 种 拟 合 结 
果 。 鲜 中 的 实 线 表 示 氟 合 曲 线 ， 虚 线 代 表 不 全 白 品 声 的 正弦 曲线 ,“ 十 ”点 为 含有 白 噪 声 
的 正弦 样本 数据 点 。 显 然 ， 经 taintm 困 数 训练 后 的 神经 网 络 对 样本 数据 点 实现 了 “过 度 匹 
配 ” 而 经 trainbr 函数 训练 的 神经 网 络 灶 噪声 不 敏感 ， 具 有 较 好 的 推广 能 力 。 

















一 15. 





kw 站 
一 1 


一 15 ，_， 
一 1 一 08-06 一 04-020 02 04 06 08 了 


图 4.28 traintm 训练 后 的 拟 合 结果 阁 429 tmainbr 训练 后 的 拟 合 结果 
值得 指出 的 是 ， 在 利用 trainbr 函数 训练 BP 网 络 时 ， 藻 训练 结果 收敛 ， 通 常会 给 出 提 
示 信息 “Maximum MU reached”。 此 外 ， 用 户 还 可 以 根据 SSE 和 SSW 的 大 小 变化 情况 来 
判断 训练 是 否 收敛 ， 光 SSE 和 SSW 的 人 在 经 过 若干 步 和 迭代 后 处 于 恒 值 时 ， 则 膛 常 说 明 网 
络 训 红 收 敏 ， 此 时 可 以 停止 训练 。 图 4.30 给 出 了 本 例 中 利用 trainbr 函数 训练 BP 网 络 的 误 
半 变 化 曲线 。 可 见 ， 当 训练 达 代 至 320 步 时 ， 网 络 训练 收 敏 ， 此 时 SSE 和 SSW 均 为 恒 
值 ， 当 前 有 效 网 络 的 参数 〈 有 效 权 值 和 阔 值 ) 个 数 为 11.7973。 














Training SSE 一 0.290704 


Piective Number of Parametcrs 一 11.7973 


天 PararneteTs 


320 Epochs 
撩 430 基 上 trmainbr 训练 的 误差 变化 曲线 
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例 4.14 采用 “提前 停止 ”方法 提高 BP 网 络 的 推广 能 力 。 对 于 和 例 4.13 相同 的 问 
题 ， 在 本 例 中 我 们 将 采用 训练 函数 traingdx 和 “提前 停止 ” 相 结合 的 方法 来 训练 BP 网 
络 ， 以 提高 BP 网 络 的 推广 能 力 。 
解 ， 在 利用 “提前 停止 ”方法 时 ， 首 先 应 分 别 定义 训练 样本 、 验 证 样本 或 测试 样本 ， 
其 中 ， 验 证 样本 是 必 不 可 少 的 。 在 本 例 中 ， 我 们 只 定义 并 使 用 验证 样本 ， 即 有 
验证 样本 输入 矢量 ;valP = [-0.975:.05:0.975] 
验证 样本 目标 矢量 ，vaLT = sin(2*+pixvalP)+0.1#randn(size(val.P)) 
值得 注意 的 是 ， 尽 管 “提前 停止 ”方法 可 以 和 任何 一 种 BP 网 络 训练 函数 一 起 使 
但 是 不 适合 同 训练 速度 过 快 的 算法 联合 使 用 ， 比 如 trainlm 函数 ， 所 以 本 例 中 我 们 采用 训练 
速度 相对 较 慢 的 变 学 习 速率 算法 traingdx 函数 作为 训练 函 煞 。 
本 例 的 MATLAB 程序 如 下 : 
狼 Example 4.14 
多 
close al 
clear 









































echo on 

clc 

和 NEWFF-- 一 生成 一 个 新 的 前 向 神经 网 络 
多 TRAIN 一 一 对 BP 神经 网 络 进行 训练 

旬 SIM 一 一 对 BP 神经 网 络 进行 仿真 

pause ”多 胡 任 意 键 开始 

clc 

铭 定义 训练 样本 矢量 

色 P 为 输入 矢量 

P= [-1:0.05:11; 

名 了 为 目标 矢量 

Tandn(seed',78341223) 

了 = sin(2*pi*P)+0.1yrandn(size(P)); 

% 绘制 训练 样本 数据 点 

plot(P,T,+)， 

echo off 

bold on; 

plot(Psin(2xpi*P)“9; 多 绘制 不 含 噪声 的 正弦 昌 线 
echo on 

clc 

pause 

clc 

驶 定义 验证 样本 

valLP = 1.0.975:0.05:0.975]; 免验 证 样本 的 输入 矢量 
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vaLT = sin(2*piyval,.P)+0.1srandn(size(vaLP) 。 色 验证 样本 的 日 标 矢量 

pause 

clc 

锡 创建 一 个 新 的 前 向 神经 网 络 

Det=newfftminmax(P),[S,1],{ftansig' purelin' traingdx9; 

pause 

clc 

和 设置 训练 参数 

net.trainParam.epochs = 500; 

net = init(netj; 

Pause 

clc 

多 训练 BP 网 络 

[nettr]=train(nebP,T,[],[],val)， 

pause 

clc 

多 对 BP 网 络 进行 仿 真 

A=simnetP): 

名 计算 仿真 误 美 

下 =T-Ai; 

MSE=mse(E) 

pause 

eic 

和 绘制 仿真 拟 合 结果 曲线 

close al; 

Plot(P,A,P,T, + ,Psin(2+pisP) 7 

pause; 

clc 

echo o 何 

下 面 给 出 了 网 络 的 某 次 训练 结果 ， 可 见 ， 当 训练 至 第 160 步 时 ， 训 练 提前 停止 ， 此 时 

的 网 络 误 养 为 0.0096035。 图 4.31 给 出 了 训练 后 的 仿真 数据 拟 合 曲线 ， 效 果 是 相当 满 
意 的 。 

TRAINGDX, Epoch 0/500, MSE 1.88365/0, Gradient 3.06586/1e-006 

TRAINGDX, Epoch 25/500, MSE 0.760054/0, Gradient 0.80772271e-006 

TRAINGDX, Epoch 5$0/500. MISE 0.389079/0. Gradient 0.42091671e-006 

TRAINGDX, Epoch 75/300, MSE 0.10162/0, Gradient 0.111724/1e-006 ; 

TRAINGDX, Epoch 1001500, MSE 0.0433248/0. Gradient 0.0341923/1e-006 

TRAINGDX, Epoch 1257500, MSE 0.025529210. Gradient 0.018226111e-006 

TRAINGDX, Epoch 150/500, MSE 0.00997371/0, Gradient 0.0380257/Ie-006 
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TRAINGDX, Epoch 160/500, MSE 0.0096035/0, Gradient 0.0143/1e-006 
TRAINGDX, Validation stop. 








- 人 
一 1 一 08 一 06 一 04 一 02 0 02 84 06 08 工 


图 431 采用 “提前 停止 ”方法 训练 后 的 拟 合 曲线 


4.4， 径 向 基 男 数 网 络 的 设计 实例 


例 4.15 利用 径 向 基 函 数 网 络 实现 园 数 逼近 。 
解 : 待 有 近 未 数 的 表达 式 为 
T= sin ($*P) + cos (3*P); 
六 数 自 变 量 的 变化 范围 是 
P=-1:0413:1; 
本 例 采用 newrb 函数 设计 径 向 基 网 络 。 下 贞 给 出 MATLAB 程序 : 
吃 Example 4.15 
久 
close ali 
clf Teset 
figure (gcn; 
echo on 





clc 

% NEWRB- 一 设计 径 向 基 函 数 神经 网 络 
% SIM 一 一 对 径 向 基 函 数 网 络 进行 仿真 
panuse 

clc ， 

%P 是 输入 矢量 ，T 是 目标 矢量 
P=-1:01:1 

T=sin (3*P) + cos (3*+P) 
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多 画 出 待 逼 近 函 数 的 图 形 





blot (P, 了 ,+ 

Pause 

clc 

多 设计 径 向 基 男 数 网 络 ， 对 通 数 进 行 运 近 
goal= 0.01; 双 误差 指标 

sp = 1 多 扩展 常数 

mn= 20; 名 神经 元 的 最 多 个 数 
df = 多 训练 过 程 的 显示 频率 
net = newib (P ,了 T, goal , sp, mn , df )， 

pause 

clc 


儿 对 网 络 进行 仿真 ， 并 画 出 样本 数据 和 网 络 输出 留 形 
YY=sim (net 了 P); 

Pilot (P, T，+?; 

hold on; 

plot PP, Y); 

echo of 作 


程序 运行 结果 如 图 4.32 所 示 ， 图 中 的 样本 数据 用 符号 “十 ”表示 。 








一 1 一 0.5 0 05 1 





图 4.32 径 向 基 网 络 的 函数 通 近 结果 


例 4.16 利用 广义 回归 网 络 实现 芭 数 逼近 。 
解 : 待 遥 近 函数 的 表达 式 为 
下 = cos (4*P) - sin (2+P) ; 
函数 自 变量 的 变化 范围 必 
P=-1:02:1; 
利用 newgrnn 函数 设计 广义 回 好 网 络 ， 
Det = newgrmn (了 P ,了 T, sp); 
在 广义 回归 网 络 中 ， 扩 展 常数 sp 的 选取 决定 了 网 络 的 通 近 性 能 ， 一 般 来 说 ， 扩 展 党 : 

















瑟 
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数 应 和 输入 数据 的 平均 问 距 相当 。 本 例 中 将 选取 两 个 扩展 常数 分 别 建立 广义 回归 网 络 ， 并 
对 网 络 的 性 能 进行 比较 。 下 面 给 出 设计 广义 回归 网 络 的 MATLAB 程序 

多 Example 4.16 

弧 

close all 

clf reset 

figure (gcD; 

echo on 

Clc 

免 NEWGRNN- 一 设计 广义 回归 网 络 

名 SIM 一 一 对 广义 回归 网 络 进行 仿真 

pause 

Clc 

名 P 是 输入 矢量 ，T 是 日 标 失 量 

=-1:02:1; 

T= cos (43P) -sin (2+P) ; 

卿 画 出 待 逼近 函数 的 图 形 

plot (PT 二) 

pause 











clc 
铭 设计 两 个 广义 回归 网 络 ， 对 通 数 进行 逼近 
免 第 一 个 网 络 

spl = 0.05; 多 扩展 常数 1 
netl = newgmn(P,T，spl) 匆 网 络 1 

多 第 二 个 网 络 

sp2 一 0.7; 镶 扩展 常数 2 
net2 =mewgrmnP,T，.sp2); 饮 网 络 2 
pause 





clc 

锡 利用 一 组 新 数据 对 网 络 进行 测试 

B1L=-141:02:1.1 

狗 对 网 络 1 进行 仿真 ， 并 画 夯 出 样本 数据 图 形 和 网 络 输出 图 形 
plot PT， markersize 20); 

title (netl 

hold on; 

YL = sim (netl,P1); 

plot (P1,Y1, markersize:, 10,， color,[ 1001; 

Pause 
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cc 

名 对 网 络 2 进行 仿真 ， 并 画 出 样本 数据 图 形 和 网 络 输出 图 形 

Sigure; 

plot (PT，，markersize'， 20); 

hold on 

Y2= sim (net2, Pl) 

title (met27; 

plot (P1, Y2，*' markersize, 10 color,T100]); 

echo off 

程序 运行 结果 如 图 4.33 所 示 ， 图 中 的 黑 点 栋 注 的 是 样 小 数据 ， 坚 号 标注 的 是 网 络 对 

测试 数据 的 输 册 。 从 图 中 可 以 看 到 ， 出 于 网 络 2 的 扩展 常数 取得 过 人 ， 内 此 该 网 络 对 数 
气 的 细节 变化 部 分 不 能 成 功 的 遂 近 。 
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图 4.33 广义 回归 网 络 的 函数 逼近 结果 


例 4.47 利用 概率 神经 网 络 对 样本 数据 进行 分 类 。 
解 ， 待 分 类 的 样本 数据 为 


| -2 -1 2 2 2 
了 = 
2 -1 -12 1 -2 
表示 笠 本 数据 类 别 的 下 标 矩 阵 为 
TI= 2 2 11 习 
概率 神经 网 络 的 输出 形式 是 单 值 矢量 组 ， 因 此 首先 应 把 下 标 矩阵 转换 为 单 值 矢量 组 : 
T = ind2vec (T1); 
然后 利用 newpnn 函数 建立 概率 神经 网 络 : 


met = newpnm (P , T, sp): 
本 例 完整 的 MATLAB 程序 如 下 : 


4 
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名 Example 4.17 
久 
close al] 
clf reset 
figure (gc 人 ; 
echo on 
Clc 
旬 NEWPNN 一 一 设计 概率 神经 网 络 
多 SIM-- 一 对 概率 神经 网 络 进行 仿真 
Pause 
clc 
锅 P 是 样本 数据 ，T 是 表示 样 森 数据 类 列 的 下 标 征 阵 
P=[1 -2 -1 2 2 22; 
2-L| -1 2 1 22]: 

TIL=flE 2 2 1 1 2]; 
名 将 下 标 矩 阵 变 为 单 值 矢量 组 作为 网 络 的 日 标 输出 
T=ind2vec (T1); 
pause 
clc 
多 设计 概率 神经 网 络 
sp=1 色 扩展 常数 
net = newpnn (P , T, sp); 
Panse 
cle 
免 对 网 络 进行 仿真 ， 并 画 出 分 类 结果 
芋 =sim (neb P); 
YL= vec2ind (了 ); 
下 gure; 
fori=1:6 

这 YIGD==1 

plot (P(E D, P(2, 上 Imarkersize'， 10); 
else 
Piot (P(L iD PC2, iD + 'markersize ,10); 

end 

hold on; 
end 
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axis ([-3 3 -3 3]; clana1:。 clasa2: 十 
title (class 1: *# class 2: +9; 3 
pause 2 举 党 
cle 1 来 
% 对 一 组 新 的 输入 数据 进行 分 类 0 
P1 = [-1; -2]; 
Y = sim (net, P1); 加 
YI1= vec2ind (Y) 的 
echo off 3 3 
分 类 结果 如 图 434 所 示 。 图 中 星 号 标注 
的 是 项 样本 数据 中 的 第 -类 数据 ， 加 号 标 汗 图 434 概率 昼 经 网 络 的 分 类 结 昌 
的 昆 第 - :类 数据 。 


4.5 和 多 组织 网 络 的 设计 实例 


例 4.18 利用 竞争 层 网 络 对 样本 数据 进行 分 类 。 
解 : 本 例 中 待 分 类 的 样本 数据 由 nngenc 函数 随机 产生 ， 即 
下 =nngenc (range, class, num, std); 
其 中 ， 参 数 class 表示 样本 数据 的 类 别 个 数 。 然 后 利用 newec 遂 数 建立 竞争 层 网 络 : 
net = newc (range , Class , kir , clr); 
其 中 ，class 是 数据 类 别 个 数 ， 也 是 竞争 层 神经 元 的 个 数 ，klr 和 cl 分 别 是 网 络 的 权 值 学 
习 速 率 和 了 值 学 习 速率 。 竞 争 层 网 络 在 训练 时 不 需要 目标 和 输出， 网络 通过 对 数据 分 布 特性 
的 学 习 ， 自 动 地 将 数据 划分 为 指定 类 别 数 。 网 络 的 训练 语句 如 下 《其 中 ， 默 认 的 训练 函数 
为 trainr); 
net = train (net P); 
在 对 训练 好 的 网 络 进行 仿真 时 ， 网 络 的 输出 为 单 值 矢量 给， 为 了 观察 方便 ，- 般 要 将 
单 值 矢量 组 转化 为 下 标 和 矩阵 的 形式 : 
立 =sim (net, P)， 
Y1 = vec2ind (Y); 
本 例 完整 的 MATLAB 程序 如 下 : 
多 Exaimple 4.18 





久 

close all ; 
clf reset 
在 gure (gcf; 
echo on ; 
clc 
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免 NEWC 一 创建 竞争 层 网 络 
和 TRAIN 一 一 对 竞争 层 网 络 进行 训练 
免 SIM 一 一 对 竞争 层 网 络 进行 仿真 


paunse 

clc 

免 产生 样本 数据 P ，P 中 包括 二 类 共 30 个 二 维 矢量 
range = [113-13; 双 样本 数据 取 值 范围 
class= 3; 多 样本 数据 类 别 数 
num = 10; 名 每 类 样本 数据 的 个 数 
std=0.13; 名 每 类 样本 数据 的 方差 
P = nngenc (range, class, num， std); 

Pause 

cle 





色 画 第 一 幅 图 ， 样 木 数据 分 布 图 
Plot (P(L, > P(2，:), "markersize， 3) axis ([-15 15 -1 1.3D; 
pause 











clc 

萄 建立 竞争 层 网 络 〈 由 于 样本 数据 分 为 三 类 ， 央 此 亮 争 层 由 三 个 神经 元 构成 ) 
Mir= 0.41; 旬 权 人 学习 速率 

cr= 001; 多 阔 值 学 习 速率 

net = newc (range , class , klr , clD; 

pause 

Clc 

有 对 网 络 进 行 串 练 

met.trainParam.epochs = 3: 狗 训练 过 程 每 五 步 显 示 一 次 

met = 丰 ain (net P); 

pause 

clc 

驳 在 第 一 幅 图 上 廿 出 竞争 层 神经 元 权 值 ， 也 就 是 每 类 样本 数据 的 聚 类 中 心 
W=netIWfI1} 

hold on; plot tw TD wG, 2) ob 

title CInput data 皮 Weights); 

Pause 

clc 


名 利用 原始 样本 数据 对 网 络 进行 仿真 
立 =sim (net, py 

YL= vec2ind (Y) 

pause 

clc 


双 页 第 一 幅 图 ， 用 不 同 符 苇 标注 数据 分 类 结果 
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fgure; 
fori= 1:30 
让 YIG)==1 
Plot (PP(, 方 . P(2, imarkersize ,5); 
elseif YL1G) ==2 
plot (P(L iD PC, D，+， markersize',5); 
else 
Plot (PLD P(2, xmarkersize,，5); 
end 
hold om: 
end 
axis ([-1.5 1.5 -1.5 1.5 六 
title (class 1:* class2:+ class3:x); 
Pause 
clc 
和 利用 一 组 新 的 输入 数据 检验 网 络 性 能 
p=[F04 -04，-01 0.9]; 
y= sim (neb p); 
yl1 = vec2ind (y) 
echo o 任 



































程序 运行 结果 如 图 4.35 所 示 。 在 图 4.35(@) 中 ， 待 分 类 的 样本 数据 用 星 号 标注 ， 网 络 
训练 完毕 后 的 竞争 层 神经 元 权 值 由 圆 因 标注 。 在 图 4.35( 引 中， 已 经 划分 好 的 三 类 数据 分 曾 
用 星 号 、 加 号 和 “x” 符 号 标 省 。 

Input data 友 Weigbts lassl:y cbass2: 十 class3:X 
31.5 1.5 
1 让 工 计 
。 人 4 二 
05 和 05 各 
0 全 0 弘 
一 05 一 05 
一 1 一 ! 
一 1 和 一 1.5 _ 
-15 -1 -05 0 95 15 一 43 1 一 5 有 05 15 
人) 待 分 类 的 样本 数据 和 急 网 络 分 类 结果 
竞争 层 神经 元 权 值 


图 435 待 分 类 的 样本 数据 和 党争 层 网 络 的 分 类 结果 
例 4.19 利用 一 维 自 组 织 网 络 对 样本 数据 进行 分 类 。 由 ， 
解 ; 本 例 中 待 分 类 的 样本 数据 是 100 个 分 布 在 L4 圆 哎 上 的 矢量 点 。 样 本 数据 P 采 : 
用 如 上 方式 产生 : ; 
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angles = 0: 0.5*+pi/99; 0.5+pi; 

P = [ cos(angles); sin(angles) ]; 
图 4.36(a) 中 绘 出 了 样本 数据 的 分 布 图 。 利 用 newsom 冰 数 建立 自 组 织 网 络 ; 

net = newsom [0 1; 0 1 [9]); 
该 网 络 的 竞争 层 共有 9 个 神经 元 ， 即 数据 的 类 别 个 数 。 白 给 织 网 络 在 训练 时 不 焉 要 有 目标 
输出 ， 网 络 通过 对 数据 分 布 特性 的 学 习 ， 自 动 地 将 数据 划分 为 指定 的 类 别 数 。 

下 面 是 完整 的 MATLAB 程序 : 
和 Examplie 4.19 
名 


close 3 





clfreset 

figure (gcg; 

echo on 

cic 

多 NEWSOM 一 一 创建 自 组 织 网络 
% TRAIN 一 一 对 外 组 织 网 络 进行 训练 
% SIM- 一 一 对 自 组 织 网 络 进行 仿真 
Pause 

clc 

锡 产生 样本 数据 

angles = 0: 0.5*pi/99: 0.5*pi 

下 = [ cos(angles); sin(angles) ]; 
pause 

Clc 

% 天 第 一 幅 图 :样本 数据 分 布 图 
Biot (27 PC 7 和 

axis ([0 1 0 1 

titte (Input data'); 

pause 

clc 

% 建立 自 组 织 网 络 

网 欲 将 样本 教 据 分 为 9 类， 办 此 网 络 的 竞争 层 由 9 个 神经 元 构成 
het = newsom (ID01;0 1 [9]); 
pause 

clc 

% 对 网 络 进行 训练 
nettrainParam.epochs = 10; 

met = train (Det, 也); 

pause 

clc 
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名 画 第 一 幅 图 ， 画 出 网 络 神经 元 权 值 ， 也 就 是 每 类 样本 数据 的 聚 类 中 心 
figure; 

WwW=netJIW{E]; 

Bletsom (netIW{L ,net-layers{f1}.distances); 

Pause 





clc 
免 利用 一 组 新 的 输入 数据 检验 网 络 性 能 
a= sim (neb [0.6; 0.8]) 
echbo off 
程序 运行 结果 如 图 4.36 所 示 。 从 图 4.36( 世 中 可 以 看 到 ， 白 组 织 网 络 不 仅 能 够 实现 数据 
的 分 类 ， 还 可 以 对 输入 数据 的 分 布 情况 进行 学 习 。 











mpat data Weight Vectors 
1 
09 
08 0g 
06 一 03 
| 号 
医 %6 
04 05 
04 
人 2 0 
0 02 
0 02 0604 06 08 1 [TIETRETT 
WGH 
人 ) 输入 矢量 的 分 布 图 铅 学 习 结果 


图 436 一 维 自 组 织 网 络 的 输入 矢量 分 布 图 及 学 习 结果 
例 4.20 利用 二 维 自 组 织 网 络 对 样本 数据 进行 分 类 。 
解 : 首先 ， 随 机 产生 符 分 类 的 样本 数据 ， 
了 P = rands (2, 500); 
图 437 中 绘 出 了 输入 样本 失 量 的 分 布 图 。 然 后 利用 newsom 函数 建立 台 组 织 网 络 : 
net = mewsorm (ft LE -1 1 [435]); 
该 网 络 的 觉 争 层 共 有 20 个 神经 元 ， 即 样 
本 数据 的 类 别 个 数 ， 竞 争 层 神经 元 的 拓扑 结构 




















采用 默认 的 入 边 形 网 格 结构。 下 面 给 出 完整 的 1 ee 
罕 ， 
MATLAB 程序 : 5 
由 

匈 Example 4.20 。 如 生 

各 本 生 坟 

close all 一 005 和 光 

clf reset _ 生 sr 银 As 4 条 

人 gure (gc -1 -05 0 0%5 1 

echo on 

clc 图 4.37 一 维 自 组 织 网 络 的 输入 矢量 分 布 图 
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旬 NEWSOM- 一 创建 自 组 织 网 络 
多 TRAIN 一 一 对 自 组 织 网 络 进行 训练 
色 SIDM 一 一 对 自 组 织 网 络 进行 仿真 
pause 

clc 

多 随机 产生 样本 数据 P 

了 = rands (2, 500); 

pause 

clc 

多 通 第 一 幅 图 : 样本 数据 分 布 图 
plot (P(1, :3), PC2， :7 

axis ([-12 12 -12 1.2])5 

title (Input data ); 

pause 

cic 


锡 建立 自给 织 网 络 


% 欲 将 样本 数据 分 为 20 类 ， 因 此 网 络 的 竞争 层 由 20 个 二 维 分 布 的 神经 元 构成 


net = newsom ([-11 -4 1,[45])， 

pause 

cic 

% 画 第 一 辐 图 ， 神 经 元 分 布 的 拓扑 结构 图 

在 gure; 

plotsom (netlayers{1}.positions); 

pause 

clc 

% 画 第 三 幅 图 ， 网 络 初始 状态 下 神经 元 权 值 的 分 布 图 
figure; 

plotsom (neLTW (1, 1}, net4ayers{1 j.distances); 
pause 

clc 

% 对 网 络 进行 训练 

nettrainParam.epochs = 1 

net = train (net, P); 

pause 

Clc 

鸡 画 第 四 幅 图 ， 画 出 网 络 神经 元 权 值 ， 也 就 是 每 类 样本 数据 的 聚 类 中 心 
在 gure; 

pliotsom (netIW{1, 1]}, netlayers{1 } distances); 
pause 

cic 

% 画 第 五 幅 了 图， 夯 出 再 次 训练 后 的 神经 元 权 值 
nettrainParam.epochs = 3; 
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net = train (met 了); 

全 gure; 

Plotsom (netLIW 1 1}, net.layers{1}.distances); 

pause 

cle 

狗 利用 一 组 新 的 输入 数据 检验 网 络 性 能 

a=sim (net, [0.1; -0.5]) 

echo o 全 

程序 运行 结果 如 图 4.37 一 图 4.39 所 示 。 从 图 中 可 以 看 到 自 组 织 网 络 对 输入 数据 分 布 情 

况 的 学 习 能 力 。 








. ， Waight Vectors 
3 
23| 05 
2 加 
令 
| 15 站 9 
! 一 05 
05 
本 1 2 3 了 
| 一 05 中 05 1 
positon(Li WEGD 
人 O 神经 元 分 布 的 拓扑 结构 铅 神 经 元 的 初始 权 值 


图 438 一 维 自 组 织 网 络 的 拓扑 结构 和 神经 元 初始 权 值 








Weight Vectors Waigha Vector 
3 06 
04 
人 02 
令 
号 9 你 9 
一 02 
一 04: 
一 905 一 06 
08 -06-04 -02 0 02 04 一 05 0 05 
WGD GD 
(人 经 一 次 训练 后 的 神经 元 权 值 人 苞 再 次 训练 后 的 神经 元 权 信 


图 439 二 维 自 级 织 网 络 的 神经 元 权 值 在 训练 过 程 中 的 变化 情况 
例 4.21 利用 学 习 矢量 量化 网 络 对 样 木 数 据 进行 分 类 。 
解 : 待 分 类 的 样本 数据 为 
pf-3 -2 -2 008 0 223 
Dll-121-1-212-10 
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表示 样本 数据 类 别 的 下 标 逢 阵 为 
Tec=E11222211 引 





由 本 学 习 矢 量 量化 网 络 的 输出 形式 是 单 值 失 量 组 ， 因 此 首先 应 把 下 标 矩 阵 转换 为 单 值 矢 











量 组 的 形式 ， 
了 =ind2vec (Tec); 


然后 利用 newlvq 范 数 建立 学 习 矢 量 量化 网 络 ， 网 络 的 竞争 层 有 4 个 神经 于。 两 类 数据 


在 样本 数据 中 所 占 的 比例 分 别 为 0.6 和 0.4， 学 习 速 率 设 为 0.1。 
net = newlvyq (minmax(P), 4, [0.6 0.4} 0.D; 
本 例 完 整 的 MATLAB 程序 如 下 : 
狗 Example 4.21 
铬 
close al 
CHf reset 
全 Bute 《gcD， 
echo on 
clc 
锡 NEWLVQ- 一 创建 学 习 矢量 量化 网 络 
多 TRAIN 一 一 对 学 习 矢量 量化 网 络 进行 训练 
%% SIM 一 一 对 学 习 矢量 量化 网 络 进行 仿真 
Pause 
clc 
缀 P 是 样本 数据 ，T 是 表示 样本 数据 类 别 的 下 标 矩阵 
P=f-3-2-20000223; 
01-121-1-21-10; 
Tc=[il12222111]; 
%% 将 下 标 矩 阵 变 为 单 值 矢量 组 作为 网 络 的 目标 输出 
下 =ind2vec (Tc); 
pause 
clc 


%% 建立 学 习 矢量 量化 网 络 


双 网 络 竞争 层 有 4 个 神经 苑 ， 两 类 数据 所 占 的 比例 分 别 为 6 和 0.4 ， 学 习 束 


率 为 01 
net = newlvq (minmax(P), 4, 0.6”0.4].0.1); 
Pause 
Cjc 


旬 对 网 络 进行 训练 
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Tet.trainParam.epochs = 20; 
net = train (net, P, 卫 ); 


Pause 
cic 
名 画 出 样本 数据 分 布 名 
人 gure; 
fori= 1:10 
让 TcG) 一 1 
plot (P(1, iD, P(2, D，* markersize'，10); 
else 
Dilot (P(1 让 P(2, iD +， markersize， 10); 
end 
hold on; 
end 
pause 
clc 


多 画 出 竞争 层 神 经 元 的 权 值 
Wi = netIW11L} 3 
WwWc = vec2ind (net.LW{2]); 
fori=1:4 
应 wcG==1 
Blot (w10U iD w102, Do markersize ,5); 
else 
Plot (w1(1 iD w1(2,i,'s "markersize,， 5]; 
enhd 
hold om; 
end 
axis ([-4 4 -3 3]) 
tite (Input data 久 Net Weights); 
Pause 
clc 
多 利用 样本 数据 对 网 络 进行 仿真 
YY= sim (net, P); 
Yec = vec2ind (Y); 
pause 
Clc 


免 利用 一 组 新 数据 对 网 络 进行 检验 
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Pcheck = [0; 0.5]; 

TI1 = sim (net, pcheck); 

Yecl = vec2ind (Y1) 

echo off 

程序 运行 结果 如 图 4.40 所 示 。 图 中 星 号 

表示 第 一 类 样本 数据 ， 加 号 表示 第 二 类 样本 
数据 ， 和 方块 表示 四 个 神经 元 的 权 值 。 
其 中 ， 圆 圈 表 示 的 神经 元 将 对 第 一 类 样本 数 
气 产 生 高 输出 ， 方 块 表示 的 神经 元 将 对 第 二 . 
类 样本 数据 产生 高 输出 。 图 440 学 习 矢量 量化 网 络 的 学 习 结果 























4.6 Hopfield 网 络 的 设计 实例 


例 422 设计 一 个 含有 两 个 神经 元 的 Hopfield 网 络 。 
解 : 在 此 仅 给 出 完整 的 MATLAB 程序 : 

镶 Example 4.22 

包 

close al 

clf reset 

figure kgcfp); 

echo on 

clc 

多 NEWHOP- 一 创建 Hopfield 网 络 

多 SIM- 一 -对 Hopfield 网 络 进行 仿真 

Pause 

clc 

色 定义 网 络 的 两 个 稳定 点 

T=[L -1 革 ; 

名 画 出 hopfield 网 络 的 状态 空间 和 两 个 稳定 点 

plot (TU 3 TO, 小 人 

axis ([-1.1 1.1 -11 1 

Pause 

clc 

驳 建立 Hopfield 网 络 

met = newhop (T); 

pause 

clc 
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匈 随机 产生 20 个 输入 ， 对 网 络 进行 仿真 
for i=20 1 
= {rands(2, 1)}; 


[y, Pt, Af = sim (net {1 20}， 1，a); 
record = [cell2mat(a) cell2mat(y)]; 0 
statt 一 Cell2tnat (3); 
hold on; 人 
多 画 出 网 络 状 态 的 变化 轨迹 了 
plot (start(LTD, start(2,D，xo recordl, 和 
Tecord(2，:)); 图 4.41 陵 神 经 元 Hopfield 网 络 的 
end 联想 记忆 结果 
echo o 竺 
程序 运行 结果 如 图 441 所 示 ， 图 中 的 “x” 符 号 表示 网 络 的 各 初始 状态 。 


例 4.23 ”设计 一 个 含有 三 个 神经 元 的 Hopfield 网 络 。 
解 : 在 此 仅 给 出 完整 的 MATLAB 程序 : 
狗 Example 4.23 
名 
close al 
clf reset 
人 gure (gcp; 
echo on 
clc 
旬 NEWHOP 一 一 创建 Hopfield 网 络 
锡 SIM 一 一 对 Hopfield 网 络 进行 仿真 
pause 
clc 
色 定义 网 络 的 两 个 稳定 点 
T=[l - -61 1 -5 
pause 
clc 
多 曾 出 hopfield 网 络 的 状态 空间 和 两 个 稳定 点 
plot3 (CT 3) T(2. 37 T(3,， 3; 
axis ([-11 1 -1LL 11 -11 1 axXis 
Set (gca, box'，'on 
view ([37.5 301; 
pause 
clc 
多 建立 Hopfield 网 络 
net = newhop (T); 


mamnual; 
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Pause 
clc 
免 随机 产生 20 个 输入 ， 对 网 络 进行 仿真 
for i=1:20 
a= {rands(3. 1)} 
[PE AH = sim et (120} (9; 
record = [cell2mat(a) cell2mat(y)]; 
start = cell2mat (3); 
hold on; 
% 画 出 网 络 状态 的 变化 轨迹 
plot3 (start(1.1), start(2,.1), start(3.1)， 
ov Tecord(1. :). record(2, ,record(3，:]); 





end 
echo off _ 
程序 运行 结果 如 图 4.42 所 示 ， 图 中 的 “x> 图 4.42 二 个 神经 元 Hopfield 网 络 的 
符号 表示 网 络 的 各 初始 状态 。 联想 记忆 结果 


4.7 ”神经 网 络 的 应 用 实例 


神经 网 络 以 其 强大 的 非 线性 映射 能 力 和 学 习 能 力 ， 能 够 解决 许多 在 实际 应 用 中 采用 党 
规 方法 难以 处 理 的 问题 ， 因 此 神经 网 络 在 很 多 领域 都 得 到 了 广泛 的 应 用 。 日 前 ， 神 经 网 络 
主要 用 二 解决 下 询 几 类 问题 : 

昌 ”智能 信息 处 理 和 模式 识别 。 

昌 ” 函 数 拟 合 与 系统 辨识 。 

在 ”信号 预测 和 信号 处 理 。 

和 ”预测 与 控制 。 

本 节 将 介绍 神经 网 络 在 预测 、 识 别 、 控 制 和 信和 号 检测 等 方面 的 几 个 应 用 实例 ， 从 而 使 
读者 能 够 对 神经 网 络 在 各 领域 的 应 用 有 个 大 致 的 了 解 ， 同 时 也 希望 为 某 些 领域 的 实际 系统 
设计 与 仿真 提供 参考 。 


4.7.1 线性 神经 网 络 在 线性 预测 中 的 应 用 


例 424 利用 线性 神经 网 络 对 某 一 正弦 信号 进行 线性 预测 。 利 用 函数 newlind 设计 线 
; 性 神经 网 络 ， 在 已 知 正弦 信号 过 去 5 个 值 的 情况 下， 预测 其 将 来 值 。 
(1) 问题 描述 。 
首先 ， 待 预测 的 正弦 信 生 了 可 以 通过 如 下 的 MATLAB 语句 生成 : 
time = 0:0.025:5， 
开 = sin (4*Pistime); 
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可 匈 ， 所 定义 的 正弦 售 号 特征 为 持续 时 间 5 秒 ， 订 样 频率 为 40 次 / 秒 。 调 用 plot 函 
数 ， 我 们 可 以 绘制 出 所 定义 的 正弦 信号 曲线 ， 如 图 4.43 所 示 。 
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图 4.43 待 预测 的 正弦 信和 号 曲线 
出 于 本 例 的 预测 问题 是 采用 正 效 信号 的 前 5 个 信号 值 来 预测 下 -个 信号 值 的 ， 所 以 神 
经 网 络 输入 矢量 P 的 5 个 分 基 可 以 通过 将 信 导 了 分 别 延 迟 1 一 5s 来 得 到 ， 即 
Q= length(TD; 
P = zeros(3.Q); 
RUL2:Q) = TG:Q-UD) 
PCQ2.3:Q) = TUL(Q-2))， 
PG,4:Q) = TUL(Q-3) 
P(4.5:Q) = TILQ- -47 
PG.6:Q) = TIQ-57); 
(2) 网 络 设计 。 
在 定义 了 网 络 输入 和 上 月 标 信号 矢量 以 后 ， 就 可 以 直接 利用 newlind 的 数 对 线性 网 络 进 
行 设计 了 。 利 用 newlind 函数 可 以 求 得 最 优 的 线性 网 络 权 值 和 阔 值 ， 即 
het= newlind(P,T); 
所 生成 的 线性 神经 网 络 结构 如 图 4.44 所 示 。 
0) 网 络 测试 。 输入 线性 神经 元 
利用 sim 函数 可 以 对 设计 好 的 神经 网 络 ! 号 
进行 仿真 ， 然 后 将 仿真 结果 《预测 输出 》 与 
实际 信号 进行 比较 ， 得 出 预测 误差 ， 妈 
a= sim (net , P); 
e=T-ai 
图 4.45 和 网 4.46 分 别 给 出 了 预测 箱 出 曲 
线 与 实际 信号 曲线 的 比较 图 和 预 测 误差 曲 
线 。 由 图 4.45 不 难看 山 ， 信 生 的 预测 值 和 实 图 444 线性 神经 网 络 结构 ; 
际 值 相 当 接 近 : 由 图 4.46 可 以 看 山 ， 在 初始 阶段 ， 误 蔡 较 大 ， 但 经 过 一 小 段 时 间 后 ， 误 差 
几乎 趋 于 零 。 这 是 由 于 在 起 始 的 5 个 仿真 步 长 内 ， 网 络 需要 的 5 个 延迟 输入 并 不 完整 ， 
此 ， 在 开始 时 出 现 初始 误 益 是 在 所 难免 的 。 
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图 4.45 正弦 信号 曲线 与 网 络 孔 测 输出 曲线 


图 4.46 网 络 预测 误差 曲线 
(4) 给 出 本 例 的 MATLAB 程序 : 
狗 Example 4.24 
镶 
close a 有 ll 
Clear 


cif reset 

丘 gure(gcb); 

echo on 

clc 

色 利 用 线性 神经 网 络 对 正弦 信号 进行 线 忻 预 测 
多 NEWLIND 一 一 采用 直接 法 设计 线性 神经 网 络 
人 SIM 一 一 对 线性 神经 网 络 进行 仿真 

pause ”多 蔽 任意 键 开始 

cle 

狗 定义 待 顶 测 的 正弦 信号 

time = 0:0.025:3; 

=sin (4*pi*time]; 

多 绘制 正弦 信号 曲线 

Plotttime:;T); 











回 第 四 章 ”基于 MATLAB 6.x 的 神经 网 络 设计 实例 213 





pause 

clc 

% 根据 待 预测 信号 生成 输入 信号 矢量 

Q=lengthOT); 

了 = zerosfS,Q); 

PGL2:Q) = TUL(Q-D); 

PC.3:Q) = THE(Q-2)); 

PG,4Q) =TG:Q-3) 

P(4,.5:Q) = TUL(Q- 4) 

P(G5,.6:Q) = TU:(Q -5); 

pause 

clc 

多 设计 线性 神经 网 络 

mnet=newlind(P.T): 

pause 

clc 

锡 对 网 络 性 能 进行 测试 

a=sim (netbP); 

e=T-3 

锡 绘制 网 络 预测 输出 曲线 

hold on 

plot(time,a:r7; 

pause 

clc 

匈 绘制 预测 误差 曲线 

echo o 信 

CHf reset 

figure(gcfb; 

echo on 

plot(time:e); 

echo o 驻 
(5) 设计 小 结 。 
由 本 例 可 见 ， 对 于 非 线性 信号 的 预测 问题 ， 利 用 线性 神经 网 络 虽 然 得 不 到 使 预测 误差 
完全 为 零 的 解 ， 但 总 可 以 找到 -- 个 使 线性 预测 误差 最 小 的 解 。 而 且 实践 证 明 ， 随 着 网 络 输 ， 
入 翌 本 量 的 增加 ， 线 性 网 络 的 预测 性 能 将 大 为 所 高。 当然 ， 如 果 涉 及 非 线性 较 强 的 预测 问 
题 ， 并 且 所 要 求 的 预测 误差 指标 又 很 高 ， 那 么 利用 线性 神经 网 络 的 线性 预测 能 力 可 能 无 法 
满足 设计 要 求 ， 这 时 采用 BP 网 络 或 径 向 基 函 数 网 络 将 比较 适合 。 
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4.7.2 ”线性 自 适应 滤波 网 络 在 自 适 应 预测 中 的 应 用 


例 425 利用 adapt 毅 数 对 自 适 应 滤波 网 络 进行 训练 并 用 设计 好 的 自 适 应 滤波 网 络 
对 某 时 变 正 靶 信 号 进行 自 适 应 预测 。 

(D 定义 输入 矢量 和 日 标 矢 量 。 

待 预测 的 时 变 正弦 信号 了 定义 如 下 : 























Sin(4xrk) KK<4S 
sin(8rk) 4Ss<k<6s 


可 见 ，4 黎 以 乓 正 
4 秒 以 后 加 倍 。 沪 时 变 
timel = 0:0.05:4; 
time2 = 4.05:0.024:6; 
time = [timel time2]: 
工 = [sindtimels4*pi) sin(time2*8g+pi)]; 
为 了 使 于 训练 ， 将 信号 工 转换 成 序列 的 形式 : 
了 = con2seq(T); 
令 网 络 输 入 信号 与 日 标 序 列 相同 
P=T; 
(2) 网 络 设计 。 
同 例 4.23， 在 每 一 个 采样 时 刻 点 ， 我 们 采用 该 时 刻 之 前 的 5 个 采样 信号 值 作为 网 络 的 
和 输入， 网络 的 输出 则 为 下 一 时 刻 信和 号 的 预测 值 。 据 此 ， 线 性 和 白 适 应 滤波 网 络 可 以 按 如 图 
4.47 所 示 的 结构 进行 设计 。 





这 号 频率 加 倍 。 此 外 ， 信 号 的 采样 频率 前 4 秒 到 每 秒 采 样 20 次 ， 
号 了 可 以 采用 如 下 MATLAB 语句 生成 ， 















































输入 线性 神经 元 











4.47 自 适应 滤波 网 络 结构 网 
首先 ， 采 用 newlin 函数 生成 如 图 4.47 所 示 的 自 适 应 滤波 网 络 ， 即 
长 = 0.1， 
delays=[12345]; 
net = newlintminmax(cat(2.P{:))) idelays,1D; 
其 中 ， 网 络 学 习 速率 立 取 为 0.1。 
1 然后 ， 利 用 adapt 函数 对 所 生成 的 神经 网 络 进行 训练: 
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[net,ae]=adapttnebP,T); 
调 练 完成 之 后 ， 即 返回 设计 好 的 目 才 应 让 波 网 络 -， 
G) 网 络 测试 。 
为 了 检测 网 络 的 预测 效果 ， 在 网 络 训练 完成 之 后 ， 可 以 将 网 络 预测 输出 刁 已 标 信号 给 
制 在 同一 幅 图 中 加 以 比较 ， 如 图 4.48 所 示 ， 其 中 虚线 代表 日 标 信 号 。 





于 2 3 了 5 
图 4.48 需 测 信和 与 日 标 信号 曲线 、 
由 图 448 可 见 ， 在 经 过 大 约 1.5 秒 的 自 适应 训练 之 后 ， 网 络 几乎 可 以 完全 跟踪 日 标 信 
号 《曲线 几乎 完全 重合 )。 在 第 4 秒 时 刻 ， 山 于 日 标 信号 的 频率 发 生 突变 ， 所 以 网 络 的 输 
出 与 目标 信号 曲线 稍 有 偏差 ， 但 由 于 神经 网 络 先前 已 经 对 与 当前 信 生 相 似 的 正弦 信号 进行 
了 学 习 ， 所 以 经 过 更 短 的 训练 时 间 就 能 再 次 精确 地 预测 月 标 信号 。 
几 4.49 给 出 了 网 络 的 预测 误差 曲线 。 


局 
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图 4.49 预 测 误 益 曲线 
() 给 出 本 例 的 MATLAB 程序 : 
狗 开 xample 4.25 
名 
close all 


他 


clear 

clf reset 

figure(gch; 

echo on 

clc 

锡 利用 线性 自 适 应 滤波 网 络 对 时 变 信号 进行 自 通 应 预测 
% NEWLIN 一 一 生成 - 个 新 的 线性 自 适应 滤波 网 络 
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多 ADAPT- 一 对 线性 白 适 应 滤波 网 络 进行 训练 
pause 。 % 项 任意 键 开始 

clc 

旬 定义 输入 矢量 和 下 标 矢量 

timel = 00.05:4; 

time2 = 4.05:0.024:6; 

time = [timel time2]; 

T= [sin(timel*4*pi) sinftime2*8*+pi)]; 

了 = con2scq(TJ; 名 输入 矢量 

P=T; 旬 目标 信号 

免 绘制 待 预测 的 目标 信号 则 线 
Blot(time,cat(2.T{:})) 

Pause 

clc 

% 生成 自 适 应 滤波 网 络 

IT=0.1; 旬 学 习 速率 
delays=[12345]; 

net = newlin(minmax(catt2.P{:]).1,delays:1nD; 
pause 

clc 

负 对 网 络 进行 训练 
[netby,e]=adapt(nebP.T); 

pause 

clc 

名 绘制 网 络 预测 输出 曲线 
plot(time,cat(2.T{:}) -vtimecat(2.y()Dn; 
pause; 

clc 

% 绘制 预测 误差 曲线 
plotttime,cat2,ef:),[min(ttmey maxttime)j, [0 0] 
pause; 

clc 

echo off 


4.7.3 BP 神经 网 络 在 模式 识别 中 的 应 用 


; 神经 网 络 尤其 是 BP 网 络 ， 以 其 强大 的 非 线性 映射 能 力 ， 在 模式 识别 领域 得 到 了 广泛 
# 的 应 用 。 本 节 我 们 将 以 MATLAB 系统 本 身 提供 的 两 个 员 型 实例 为 代表 ， 具 体 讨论 BP 神经 
;网 络 在 模式 识别 领域 的 示 用 。 

:1 。， 例 426 血清 胆 固 蕉 含量 检测 问题 。 通 常 ， 医 生 总 是 根据 某 一 血样 的 光谱 成 份 来 判定 
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血样 中 的 血清 胆 辕 醉 含量 的 高 低 《〈 通 常 划分 为 hdl、1dl、vldl 三 个 指标 值 )。 牟 过 临床 实践 
共 提取 了 264 位 病人 的 血样 检测 结果 数据 ， 其 中 每 一 个 检测 结果 均 对 应 所 测 血 样 光谱 的 21 
个 波长 值 。 现 在 要 利用 上 述 样本 数据 训练 和 设计 ~ 个 神经 网 络 ， 使 其 能 够 白 动 地 完成 上 述 
检测 过 程 。 
(1D 样本 数据 的 定义 与 预 处 理 。 
choles_allmat 文件 中 存储 了 网 络 训练 所 需要 的 全 部 样本 数据 。 利 用 load 函数 可 以 在 工 
闻 中 自动 载 入 网 络 训 练 所 需 的 输入 数据 和 旨 标 数据 5， 即 
load choles_al 
Sizeofp = size (P) 
sizeofp ~ 
21 “264 
Sizeoft =.SiZe (tb 
Sizeo 人 一 
3 264 
可 见 ， 样 本 集 的 大 小 为 264。 为 了 提高 神经 网 络 的 训练 效率 ， 般 常 要 对 样本 数据 作 适 
当 的 预 处 理 。 首 先 ， 利 用 prestd 少数 对 样本 数据 作 归 一 化 处 理 ， 使 得 归 一 化 后 的 输入 和 日 
标 数据 均 服从 正 态 分 布 ， 即 
[pn,meanp,stdp,tn,meanbstdt] = prestd(p,0; 
然后 ， 利 用 prepca 函数 对 归 一 化 后 的 样本 数据 进行 主 元 分 析 ， 从 而 消除 样本 数据 中 的 
元 余 成 份 ， 起 到 数据 降 维 的 目的 。 
[ptrans,transMat] = prepca(pn,0.001); 
[R,Q1= size(ptrans) 
及 = 
4 








作 空 








Q 


264 

可 见 ， 主 元 分 析 之 后 的 样本 数据 维 数 被 人 大 降低 ， 输 入 数据 的 维 数 由 21 变 为 4。 

(2) 对 训练 样本 、 验 证 样本 和 测试 样本 进行 划分 。 

为 了 提高 网 络 的 推广 能 力 和 识别 能 力 ， 训 练 中 采用 “提前 停止 ”的 方法 ， 因 此 ， 在 训 
练 之 前 ， 需 要 将 上 面 处 理 后 的 样本 数据 适当 划分 为 训练 样本 集 、 验 证 样本 集 和 测试 样本 
集 。 样 本 数据 集 的 划分 可 以 通过 如 下 MATLAB 语句 实现 ; 

iitst= 2:4:Q; 


























iival = 4 

iit = [1:4:Q 3:4:Q]; 

valLP = ptrans(;iivaD; valT= tmnlsiivaD; 。 旬 验证 样本 集 
tesLP = ptrans(::iitst; testT = tn(:'iitst; 色 测试 样本 集 
ptr = ptrans(:;iit: ttr = tiitD; 免 训练 样本 集 


可 见 ， 验 证 样本 和 测试 样本 均 是 从 原样 本 数据 中 均匀 选取 J4 而 生成 的 。 
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(G) 网 络 生成 与 训练 。 
选用 两 层 BP 网 络 ， 其 中 网 络 输入 维 数 为 4， 输 出 维 数 为 3， 输 出 值 即 为 血清 胆固醇 的 
三 个 指标 值 大 小 。 网 络 中 间 层 神经 元 数 日 预选 为 5， 传 递交 数 类 型 选 为 tansig 函数 ， 输 出 
层 传递 函数 选 为 线性 函数 purelin， 训 练 函 数 设 为 rainlm。 网 络 的 生成 语句 如 下: 
net = mewftCminmax(ptr),[5 3],{tansig' purelin' ,trainlm7; 
利用 train 间 数 对 所 生成 的 神经 网 络 进行 训练 ， 训 练 结果 如 下 ， 
[nebtr]=train(netptrttp[],[],valtesb; 
TRAINLM, Epoch 0/100. MSE 2.4689/0, Gradient 784.771/1e-010 
TRAINLM, Epoch 20/100, MSE 0.328009/0, Gradient 4.33429/1le-010 
TRAINLM, Validation stop. 
J 见 ， 网 络 训练 迭代 至 第 20 步 时 提前 停止 ， 这 是 由 于 验证 误 盖 已 经 开始 变 大 。 利 用 
下 面 语 铝 可 以 绘制 出 训练 误 莽 、 验 证 误差 和 测试 误差 的 变化 曲线 ， 如 图 4.50 所 示 。 出 图 可 
见 ， 验 证 误差 和 测试 误差 的 变化 趋势 基本 一 致 ， 说 明 样 本 集 的 划分 基本 合理 。 由 训练 误差 
曲线 可 见 ， 训 练 误差 结果 也 是 比较 满意 的 。 
Plotttr.epochstr.perf,tr.epochstrvperf ,trepochtripert -.) 
legend(CTraining', "Validation, Test, 1); 
ylabel('Squared Error); xlabel(Epoch 
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图 4.50 误差 变化 邮 线 


(4) 网 络 仿真 。 
_ 为 了 进一步 检验 训练 后 网 络 的 性 能 ， 下 面 对 训 练 结果 作 进 一 步 仿真 分 析 。 利 用 postreg 
;图 数 可 以 对 网 络 仿真 的 输出 结果 和 目标 输出 作 线性 回归 分 析 ， 并 得 到 两 者 的 相关 系数 ， 从 
: 而 可 以 伟 为 网 络 训练 结果 优 劣 的 判别 依据 。 仿 真 与 线性 回归 分 析 如 下 : 
: an = simGnetptrans); 
a= poststd(an,meant'stdb; 
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for ij=1:3 
figure(i) 
[mfihb(i,rGib] = postreg(ai)ti2) 
end 
图 4.51 一 图 4.53 分 别 给 出 了 网 络 三 个 输出 的 线性 回归 分 析 结 果 曲 线 。 
由 图 4.51 和 图 4.52 回归 分 析 结 果 可 见 ，hdl 和 ldl 指标 值 的 检 洲 结果 输出 是 十 分 满意 
的 ， 它 们 与 目标 输出 的 相关 系数 几乎 达到 了 0.9。 由 图 4.53 可 见 ， 网 络 vidl 指标 值 的 输出 
结果 与 期 望 值 偏差 较 大 ， 需 要 重新 对 网 络 进行 设置 和 训练 。 有 兴趣 的 读者 可 以 通 当 增 加 
BP 网 络 中 间 层 的 神经 元 个 数 ， 或 采用 贝 叶 斯 正则 化 方法 ， 重 新 对 网 络 进行 训练 ， 以 期 得 
到 更 好 的 网 络 性 能 . 




















Best Linear Fit: A 一 (0.79)T 十 (10.8) 
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图 4.51 网 络 输 出 hdl 值 的 回归 分 析 结果 
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图 4.52 网 络 输出 dl 值 的 回归 分 析 结果 
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Best Linear Fit， A 一 (0.384 痊 十 (27) 
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图 453 网 络 输 汕 yldl 值 的 了 贞 分 析 结果 


(4) 给 出 本 例 的 MATLAB 程序 : 
多 Example 4.26 
名 
close alt 
cieat 
echo on 
clc 
色 BP 神经 网 络 用 十 血清 胆 周 醇 含 量 检测 
% PRESTD 一 一 对 样本 数据 进行 标准 化 处 理 
多 PREPCA 一 一 对 样本 数据 进行 主 元 分 析 
% NEWFF 一 一 生成 一 个 新 的 前 向 神经 网 络 
和 TRAIN- 一 对 BP 网 络 进行 训练 
免 SIM 一 一 对 BP 网 络 进行 仿真 
% POSTREG-- 一 对 仿真 结果 进行 回归 分 析 
pause 。” 锡 胡 任 意 键 开 始 
cle 
名 加 载 样本 数据 
load choles_all 
sizeofp = size(p) 
Sizeof = sizett) 
pause 
clc 
旬 对 样本 数据 进行 标准 化 处 理 


fpn.meanp.stdp,tn,meantstdt] = prestd(p,b; 





园 


第 四 章 ”基于 MATLAB 6.x 的 神经 网 络 设计 实例 221 








% 对 样本 数据 进行 证 元 分 析 

[Ptrans,transMiat] = prepca(pn,.0.001); 

[R,Q] = size(ptrans) 

Pause 

clc 

锡 将 样本 数据 划分 为 训练 集 、 验 证 集 和 测试 集 
iitst = 2:4:Q; 
iiyal= 4:4:Q; 

iitr = [1:4:Q34:Q]: 

valP = ptrans(:iivalj; vaLT= tn(,iivab， ”免验 证 样本 集 
tesLP = ptrans(:iitsb; test.T = In(:iitst; 狗 测试 样本 集 





名 训练 样本 集 
旬 创建 神经 网 络 
net = newfftminmax(ptr,[5 3],ftansig' purelin }vtrainlm); 
pause 
clc 


旬 对 神经 网 络 进行 训练 
fnettrj=trainaebptrttr, 口 ,由 hval,tesb; 
锡 绘制 误差 变化 曲线 
plot(tr.epoch.tr,perf,tr.epochtr.vperf， :tr.epochtr.tpert 
legendCTraining' "Validation', Test,-1) 
ylabel(Squared Error); xlabel0Epoch ); 
pause 
clc 
锣 对 网 络 进行 仿真 分 析 
an=sim(netptrans); 
引 = poststd(anmeamnt,stdb; 
狗 将 仿真 结果 与 日 标 输出 作 线性 回归 分 析 
fori=1:3 

figure( 订 

[mGDb(irGD] = postreg(ati2tGi 7 
end 
pause 
echo off 


例 4.27 “利用 神经 网 络 进行 字符 识别 。 字 符 识别 是 模式 识别 的 一 个 典型 应 用 ， 教 会 计 


算 机 识别 字符 ， 在 某 些 领域 ， 比 如 银行 支票 处 理 方面 ， 可 以 大 大 提高 支票 的 处 理 效率 。 企 
本 例 中 ， 我 们 将 训练 BF 神经 网 络 使 其 能 够 对 26 个 英文 字母 进行 识别 。 
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(0 问题 找 述 。 
在 计算 机 中 ,字符 或 图 像 均 可 以 用 位 图 形式 加 以 
述 。 图 4.54 给 出 了 字母 A 的 位 图 形式 ， 如 果 家 1 
表示 ， 其 余 元 素 点 用 0 表示 ， 则 字母 A 可 以 用 一 个 了 7 
X5 的 矩阵 来 表示 。 



























































色 4.54 字母 A 的 位 隅 








TI 一 一 口 品 号 
已 口 一 口 一 一 呈 
已 局 一 口 己 口 一 


局 司 一 号 一 一 己 
上 上 一 一 口 口 己 


如 果 将 上 述 矩 阵 按 行 拉 直 ， 则 可 以 得 到 以 列 矢 量 形式 表示 的 字母 A， 即 
A=[001000101001010100011111110001 10001 下 
该 列 矢量 可 以 作为 识别 字母 A 的 特征 矢量 。 以 同样 的 方式 ， 可 以 定义 其 他 所 有 英文 字 
母 的 特征 矢量 ， 以 作为 神经 网 络 的 识别 依据 《识别 网 络 输入 )。 
神经 网 络 的 识 刊 结果 〈 目 标 输出 )， 即 26 个 英文 字母 的 模式 失 量 ， 可 以 用 - -个 26 维 
的 列 矢量 表示 ， 比 如 字母 A、B 的 模式 矢量 分 别 为 
targeLA=[10000000000000000000000000 了 
target B=[01000000000000000000000000] 
他 字母 依 此 类 推 。 
所 有 字母 的 理想 特征 矢量 和 模式 矢量 即 构成 了 神经 网 络 的 训练 样本 集 。 通 过 调用 
prprob 函数 可 以 自动 生成 上 述 样 本 集 ， 即 
[alphabettargets] = ptprob; 
IfR.Q] = size(alphabeb) 
其 中 ，alphabet 为 所 有 字母 的 理想 特征 矢量 集合 ， 
targets 为 相应 的 模式 矢量 集合 。 
可 见 ， 利 用 神经 网 络 进行 字符 识别 ， 实 际 上 是 通 
过 训练 神经 网 络 ， 使 其 能 够 根据 字符 的 特征 输入 得 到 
期 望 模式 矢量 的 过 程 。 然 而 ， 在 实际 识别 过 程 中 ， 字 
符 的 特征 输入 矢量 中 可 能 会 混入 噪声 ， 例 如 , 图 4.55 ，， 
给 出 了 一 个 含有 噪声 的 字母 A 的 位 图 ， 因 呈 ， 在 训练 图 455 ”省 有 噪声 的 字母 入 位 图 
和 设计 神经 网 络 时， 应 该 能 够 使 网 络 具 有 一 定 的 抑制 “ 
噪声 的 能 力 。 
(2) 网 络 的 生成 与 训练 。 
在 神经 网 络 设计 过 程 中 ， 我 们 采用 如 图 4.56 所 示 的 前 向 网 络 结构 。 其 中 ， 网 络 输 入 的 
仿 数 即 为 字符 特征 矢量 的 维 数 35， 输出 神经 元 的 个 数 即 为 字符 模式 矢量 的 维 数 26， 了 中层 


















































ae 








第 四 章 ”基于 MATLAR 6.x 的 神经 网 络 设计 实例 223 





神经 元 个 数 暂时 取 为 10， 隐 层 和 输出 层 神经 元 的 传递 函数 均 取 logsig 函数 ， 这 样 可 以 保证 
网 络 输出 0 一 1 范围 内 的 数 ， 网 络 训练 函数 取 traingdx。 


输入 隐 层 辖 出 姑 











昌 一 logsigGT+ 轨 十 思 ) 2 一 logsig(ET21gL 十 5 


医 4.56 识别 网 络 的 结构 
上 述 神经 网 络 可 以 通过 如 下 诸多 来 生成 : 
S1=10; 
[R,Q] = size(alphabef); 
[S2,Q] = sizektargets) 
了 = alphbabet 
het= newfftminmax(P),[S1 S2],{ logsig' logsig j,traingdx ); 
为 了 提高 神经 网 络 抑制 噪声 的 能 力 ， 我 们 采用 理想 样本 数据 和 含有 不 同 程度 噪声 的 样 
本 数据 问 时 对 网 络 进行 训 练 。 训 练 过 程 分 以 下 三 步 进行 : 
他 用 理想 样本 数 提 训 练 神经 网 络 。 
下 = alphabet' 
工 =targets; 
net.performFcn = 'sse'; 
nettrainParam.goal = 0.1; 
nettrainParam.show = 20; 
nettrainParam.epochs = 5000; 
nettrainParam.mc 一 0.95; 
[nebtr] = trainCnetP,T); 
加 用 含有 噪声 的 样本 数据 训练 神经 网 络 。 
Tetn = net; 
metn.trainParam.goal = 0.6; 
netn.trainParam.epochs = 300; 
T= Etargets targets targets targets]; 
for pass= 10 
P = [alphabet, alphabet, (alphabet + randn(R,Q)*0.1), (aljphabet + randn(R,Q)*0O.2)]; 
fnetn,tr] = trainnetn,P,T); 
end 


人 
锭 全 | 
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图 再 次 用 理想 的 样本 数据 训练 神经 网 络 〈 同 上 消 骤 四 )。 

在 网 络 训练 完成 之 后 ， 由 于 受 噪声 的 影响 ， 网 络 输出 模式 矢量 中 的 元 素 可 能 不 是 单纯 
的 取 0 或 1 两 个 值 ， 因 此 ， 我 们 将 网 络 的 输出 通过 竞争 传递 函数 compert 进行 运算 ， 从 而 
能 够 得 出 最 接近 网 络 输出 的 标准 模式 矢量 。 

G) 网 络 测试 。 

现 采用 含有 不 同 均 方 差 和 噪声 的 输入 戏 式 对 所 设计 的 神经 网 络 模式 识别 系统 进行 仿 
真 ， 根 据 仿真 结果 计算 误 识 率 ， 从 市 检验 识别 网 络 系统 的 性 能 。 

采用 噪声 取 均 值 为 0， 均 方差 依次 为 00.05:0.5 的 白 噪声 模型 进行 系统 仿真 。 对 于 每 一 
种 不 同方 差 的 白 噪 声 ， 在 诛 有 理想 训练 样本 的 基础 上 ， 我 们 均 产 生 100 组 含有 该 类 型 星 声 
的 样本 ， 然 后 利用 这 些 样本 对 识别 网 络 进行 仿真 ， 根 据 仿 嘉 结 果 计算 出 100 组 样本 的 误 识 
率 。 依 此 类 推 ， 最 终 订 以 得 到 如 图 4.57 所 示 的 网 络 误 识 率 与 噪声 方差 的 变化 关系 曲线 。 











Percentage of Recognition Erroars 





册 十 


总 名 央 


四 


Networkl -一 Netwaord2--… 


所 








避 _ un 





0 0050T015 027023 03 035 04 045 05 
Noise Level 
图 457 误 识 率 与 噪 访 方 关 的 变化 关系 曲线 
在 图 457 中 ， 实 线 和 康 线 分 别 代表 两 种 不 同 识别 网 络 的 误 识 率 灾 化 曲线 。 其 中 ， 实 线 
对 应 的 识别 网 络 是 经 过 理 候 样本 和 虽 声 样本 集 同 时 济 练 后 得 到 的 结果 ， 而 虚线 对 应 的 识别 
网 络 则 具 经 过 了 理想 样 不 的 训 练 。 由 此 可 见 ， 利用 含 噪声 的 样本 集 对 赔 络 进行 训练 可 以 大 
人 提高 网 络 的 识别 能 力 。 回 时 可 以 看 到 ， 随 着 噪声 均 方 益 的 逐步 变 大 ， 两 种 网 络 的 误 识 率 
均 坚 上 升 趋势 ， 而 在 噬 声 均 方 益 小 于 0.15 之 前 ， 网 络 误 识 率 呈 很 小 的 。 
为 了 进一步 提高 网 络 的 识别 能 力 ， 减 小 误 识 率 ， 可 以 通过 进一步 增加 合 嗓 声 的 训练 样 
本 集 的 天 小 或 增 大 识别 网 络 的 规模 来 实现 ， 有 兴趣 的 读者 不 妨 一 试 。 
为 了 更 形象 地 演示 神经 网 络 的 识别 过 程 ， 我 们 可 以 用 上 面 设计 的 神经 网 络 对 一 个 含有 
只 声 的 字母 B 进行 识别 ， 其 MATLAB 语句 如 下 ， 
noisyB = alphabet(:.2)+randn(35,1)* 0.23 
plotchar(noisyB); 























A2 = sim(netinoisyB); 
A2 = compet(A2); 
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ansSwer 一 Snd(compct(A2) == 1): 
plotchar(alphabet(:,answery); 

噪声 字母 B 及 最 终 识别 模 式 的 位 图 分 别 由 图 4.58 和 图 4.59 给 出 。 册 图 可 见 ， 识 别 网 

络 正确 地 识别 出 了 字 址 B。 
































图 4.58 含有 噪声 的 宁 奇 B 的 位 图 4.59 识别 结果 
(4) 给 出 本 例 的 MATLAB 程序 ， 

狗 Example 4.27 

狗 

close al 

clear 

echo on 

chc 

色 用 BP 神经 网 络 进行 英文 字符 识别 

旬 NEWFF 一 一 生成 一 个 新 的 前 向 神经 网 络 

多 TRAIN 一 一 对 神经 网 络 进行 训练 

多 SIM 一 一 对 神经 网 络 进行 仿真 

pause 。 % 地 任 意 键 开始 

clc 

色 载 入 训练 样本 

[alphabebtargets] = prprob; 

[RLQ1] = size(alphabet) 

[PR2,Q2] = sizeltargets) 

pause 





clc 

狗 生成 神经 网 络 

S1= 10; 

S2=R2; 

met = newff(minmax(alphabeb,[S1 S2],(logsig logsig']},traingdx7; 
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netLW{2,1) = neLLW{2,1j*0.01 
netbf2 = netb{2}*0.012: 
pause 

clc 

色 训练 神经 网 络 

乞 二 用 理想 样本 训练 神经 网 络 
P = alphabet; 

工 = targets; 

PetperformEFcn = "SSse 
net.traipParam.goal = 0.1; 
net.trainParatm.show = 20; 
net.trainParam-epochs = 5000; 
mettrainParam.mec = 0.93; 
[nettr] = train(netP,T); 


pause 色 鼓 任意 键 继续 


clc 
和 2. 用 含有 不 同 程度 噪声 的 样本 滑 练 神经 网 络 
ietn = et; 


netn.trainParam.goal = 0.6; 
netn,trainParam,epochs = 300， 

下 = [targets targets targets targets]; 
for pass= 1:10 

fprintf('Pass = %.Ofvn ,passh); 

P = [alphabet, aiphabet, … 
(alphabet + randn(R.Q)*0.1), … 
(alphabet + randn(R,Q)*0. 轨 ]; 

[netn,tr] = traintnetn,P,; 

echo off 

end 

echo on 

pause 免 蔽 任意 键 继续 
clc 

多 3. 再 次 用 理想 样本 训练 神经 网 络 
petn.trainParam.goal = 0.1; 
netn.trainParam.epochs = S00; 
netn.trainParam.show = 3; 

P = alphahbet; 

了 =targcts; 

[netn.tg] = trainGaetn,P,T); 

% 训练 结束 
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pause 
clc 
% 对 识别 网 络 进行 测试 
%% 设置 测试 参数 
noise_range = 0:.05:.S; 名 躁 声 均 方 差 
max_test = 100; 
networkl = []; 狗 网 络 1 的 误 识 率 
network2 = []; 色 网 络 2 的 误 识 率 
% 进行 网 络 仿真 和 测试 
for noiselevel = noise_range 
fprintf(Testing networks with noise level of 名 .2f nnoiselevel); 
errors1 = 0; 
errors2 = 人 0 
for i=1:max_test 
P = alphabet + fandn(35,26)*noiselevel; 
和 测试 网 络 1 
A=simnebP); 
各 A = compet(A): 
errorsl = errorsl + sumtsum(abs(AA-T)))72; 
钢 测试 网 络 2 
An = sirmn(netn.P); 
AAn = compet(Arm; 
errors2 = errors2 + sum(sum(abs(AAn-T)))723 
echo off 
end 
networkl = [networkl errors1/726/100]; 
network2 = [network2 errors2726/100]; 
end 
echo on 
pause 。 %% 任 意 键 绘制 测试 结果 曲线 -一 误 识 率 曲线 
cle 
色 绘制 网 络 误 识 率 曲 线 
plot(noise_range,network1 *100,--,noise_range,network2*100); 
titlie(Percentage of Recognition Errors(9);， 
Xlabel(Noise Level); 
ylabelONetwork 1- -Network 2 一 - 信 
pause 
clc 
所 一 个 测试 实例 
免 生成 一 个 含 噪声 的 字母 B 作为 网 络 输入 
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noisyB = alphabet(:,2)+randn(35,1) * 0.2; 
名 绘制 含 噪声 的 字母 B 的 位 图 
Plotchar(noisyB); 

Pause 





clc 

. 马 对 输入 模式 进行 识别 

A2 = Sim(tnebnoisyB); 

内 2 = Compet(A2); 

answer= find(compet(A2) == 1); 

名 绘制 识别 结果 对 应 的 模式 位 
，Plotchar(alphabet(:,answen); 

Pause 

echo of 全 


4.7.4 神经 网 络 在 预测 控制 中 的 应 用 


预 测 控制 是 20 划 纪 70 年 代 后 期 发 展 起 来 的 一 类 新 型 计算 机 控制 算法 ， 这 种 算法 的 本 
质 特征 主要 包含 三 个 要 素 。 预测 模型 滚动 优 化 和 反馈 校正 。 目 前 ， 线 性 系统 的 预测 控制 
问题 已 经 得 到 了 解决 ， 但 对 地 非 线性 系统 的 预测 控制 问题 ， 由 于 要 面临 建立 非 线性 系统 的 
预测 模型 的 问题 ， 所 以 解决 起 来 就 相对 困难 得 多 。 由 于 神经 网 络 可 以 对 非 线性 动态 过 程 进 
行 精确 的 播 述 ， 因 此 ， 利 用 神经 网 络 进行 预测 控制 可 以 较 好 地 解决 非 线性 系统 的 预测 控制 
问题。 

MATLAB 6x 的 动态 仿真 工具 Simulink 中 提供 了 专门 用 于 设计 神经 网 络 预测 控制 器 的 
工具 模块 。 在 建立 了 被 控 对 象 的 系统 模型 后 ， 利 用 该 模块 ， 用 户 订 以 方便 地 建立 基于 神经 
网 络 的 预测 近 制 系统 ， 还 可 以 在 Simulink 环境 中 对 所 设计 的 系统 进行 动态 可 视 化 仿真 和 分 
析 。 本 节 我 们 将 参照 MATLAB 自身 所 提供 的 一 个 应 用 实例 ， 介 绍 Simlink 环境 下 神经 网 
络 预测 控制 器 的 设计 和 仿真 过 程 。 

例 428 ”设计 神经 网 络 预 测控 制 器 对 非 外 四 
线性 系统 进行 控制 。 如 图 4.60 所 示 为 某 一 深 4 世 
液 搅拌 系统 ， 其 中 ，wi 、rwa 分 别 为 两 个 入 口 
溶液 的 流速 ，Cu 、Co 为 相应 入 口 溶液 的 浓 中 
度 ，wm 为 出 口 溶液 的 流速 ，Cv 为 出 口 溶 波 的 
良 度 ， 户 表示 挠 拉 容 器 中 溶液 的 高 度 。 系 统 9 
模型 可 以 用 如 下 方程 式 来 描述 ， 图 460 消 波 名 拉 系统 


作 -mw (D+ 志 (一 02VaD 
dc 
dt 





到 
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在 上 述 公式 中 ， 设 ml =01，Co =249，cCom =01， 抹 = 上 局 =1， 要 解决 的 问题 是 通 
过 控制 入 口 处 溶液 二 的 流速 w: ， 使 得 出 口 滩 液 的 浓度 Cs 保持 恒定 。 
(0 神经 网 络 预 测控 制 的 某 本 康 埋 。 


在 进 行 系统 设 汁 以 前 ， 首 先 简要 介绍 一 下 神经 网 络 预测 控制 系统 的 基本 结构 和 诛 理 。 
神经 网 络 预测 控制 系统 的 基本 结构 如 疼 4.61 所 示 。 








图 4.61 神经 网 络 顶 测 控制 系统 的 结构 
首先 ， 神 经 网 络 预测 模型 主要 用 来 描述 被 控 对 象 的 动态 行为 ， 它 根据 系统 当前 的 控制 
输入 和 输出 信息 预测 未 来 的 输出 值 。 构 建 神经 网 络 预测 模型 是 设计 神经 网 络 预测 控制 器 的 
第 一 步 ， 它 通常 可 以 根据 从 被 控 对 象 所 获取 的 输入 /输出 样本 数据 ， 对 神经 网 络 进行 离线 
训练 生成 。 用 作 预 测 模型 的 神经 网 络 可 以 采用 如 图 4.62 所 示 的 带 有 输入 延迟 链 的 网 络 
结构 。 





输入 移 层 输出 层 














阁 4.62 用 作 预 测 模型 的 神经 网 络 结构 
其 次 是 非 线性 优化 器 ， 这 是 预测 控制 器 的 核心 部 分 。 非 线性 优化 器 即 通过 优化 如 下 性 
能 指标 函数 来 计算 系统 的 控制 输入 信号 : 


几 
JCONNaNJ= > e+ 站 +py ACTH 一 中 
气 


1 





e+ 及 = 区 芷 十 万- 一 mdt 二 太 
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为 本 来 时 刻 系统 期 望 输出 与 预报 输出 的 误 蔚 。 





AGE+-D=EG+JD-G+ 关 分 





为 未 来 时 刻 的 控制 增 量 。 优 化 指标 中 ， NI 称 为 最 小 输出 预报 区 间 ， Na 称 为 最 大 输出 预报 
区 间 ， 表 明了 待 优化 的 木 来 输出 需要 被 跟踪 的 时 间 范 围 ， Nu 是 控制 发 度 ， 表 示 本 来 归纳 
入 考虑 的 时 间 控制 范围 ; P 为 加 权 因 子 ， 表 示 控 制 能 量 对 优化 指标 的 页 献 度 。 所 有 这 些 优 
化 参数 在 设计 控制 器 时 均 可 自行 设 定 。 

关 丁 神经 网 络 预测 控制 的 有 关 知 识 ， 读 者 可 参考 相关 的 专业 文献 ， 这 里 不 再 详 述 。 

(2) 控制 系统 的 设计 与 仿真 。 

F 面 ， 我 们 利用 Simulink 动态 仿真 工具 和 相关 模块 设计 神经 网 络 预 测控 制 系统 ， 用 于 
对 溶液 搅拌 系统 的 流出 溶液 浓度 进行 控制 。 控 制 系统 的 设计 过 程 主 归 分 以 上 几 步 进行 : 

@ 构建 被 控 对 得 一 一 溶液 搅拌 系统 模型 ， 

四 构建 神经 网 络 韦 测 模型 ; 

加 设置 非 线性 优化 器 的 优化 参数 ; 

国 建立 反馈 控制 系统 模型 ， 对 系统 进行 仿真 。 

启动 MATLAB， 在 命令 窗口 中 键入 命令 predcstr 即 可 进入 如 图 4.63 所 未 的 已 经 构建 好 
的 控制 系统 模型 窗口 。 其 中 ，NN Predictive Controller 模块 为 神经 网 络 预测 控制 器 模块 ， 
Plant 模块 即 为 溶液 搅拌 系统 模型 。 
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图 4.63 ”溶液 搅拌 器 神经 网 络 预 测控 制 系统 模型 


双击 Plant 模块 ， 即 可 打开 如 图 4.64 所 示 溶 液 搅拌 系统 的 Simulink 模型 ， 该 系统 为 
个 单 输入 、 单 输出 系统 ， 输 入 为 控制 量 w ， 答 山 为 流出 溶液 的 浓度 C。 。 深 液 搅拌 系统 的 
;simulink 模型 文件 名 为 cstrmdl。 
: 双击 NN fredietive Controller 模块 ， 即 可 显示 如 图 4.65 所 示 的 神经 网 络 预测 控制 器 设 
于 计 界面 。 利 用 该 界面 ， 可 以 对 预测 优化 算法 中 所 用 到 的 优化 参数 进行 设置 。 


有 
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图 4.64 攻 波 搅 捍 系 统 的 Simulink 模型 


在 图 4.65 中 ， 点 击 Plant Identification 按钮 ， 即 可 进入 神经 网 络 预测 模型 设计 界面 ， 
如 图 4.66 所 示 。 在 编 呈 预测 优化 算法 之 前 ， 首 先 要 对 神经 网 络 预测 模型 进行 设计 。 神 经 网 
络 预 测 模型 的 设计 过 程 即 为 神经 网 络 的 训练 过 程 。 利 几 如 图 4.66 所 示 界 霖 ， 可 以 方便 地 对 
用 作 预 测 模型 的 神经 网 络 的 结构 进行 设置 ， 利 用 已 构建 好 的 被 控 对 象 模型 生成 神经 网 络 训 
练 样 木 数据， 设置 训练 参数 ， 最 后 完成 对 神经 网 络 的 训练 。 


ITZIITTTEETSITTT 赂 各 = 中 | 
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网 4.65 ”神经 网 络 孔 测控 制 占 的 参数 设 普 界 面 

在 训练 神经 网 络 之 前 ， 首 先 须 生 成 齐 练 样本 数据 。 点 击 Generate Training Data 按钮 ， 
系统 将 根据 设 定 的 训练 数据 的 归 求 产生 一 系列 白 噪声 作为 激励 ， 通 过 已 定义 好 的 被 控 对 象 
产生 相应 的 输出 数据 。 图 4.67 给 出 了 某 次 牛 成 的 训练 样本 数据 。 若 生成 的 数 刀 满 意 ， 则 # 
击 Accept Data 按钮 并 返回 如 网 4.66 所 示 的 欠 面 。 
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图 4.66 ”神经 网 络 预 测 模型 的 设计 界面 
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图 4.67 生成 的 训练 样本 数据 
设置 好 训练 参数 后 ， 点 击 Train Network 按钮 即 可 对 配置 好 的 神经 网 络 进行 训练 。 训 练 
;完成 后 ， 显 示 如 图 4.68 所 示 的 神经 网 络 预 测 模型 的 输出 | 线 〔 同 时 显示 的 曲线 还 有 训练 
: 误差 变化 曲线 ， 若 训练 前 选择 了 验证 样本 或 测试 样本 ， 还 会 给 出 神经 阅 络 预测 模型 对 这 两 
: 个 样本 输入 集 的 响应 曲线 )。 训 练 完 成 后 ， 可 以 在 此 莫 山 上 重新 生成 一 组 洲 练 数据 ， 再 次 
; 对 网 络 进行 训练 。 点 击 OK 按钮 ， 则 完成 神经 网 络 预测 模型 的 设计 ， 同 时 返回 主 界面 。 
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图 4.68 训练 结果 曲线 
在 返回 如 图 4.65 所 示 主 界面 后 ， 即 可 对 非 线性 优化 器 的 优化 参数 进行 设置 。 设 置 的 优 

化 参数 如 图 4.65 所 示 。 点 击 OK 按钮 ， 则 整个 神经 网 络 预测 控制 器 的 设计 完成 。 
利用 治 计 好 的 神经 网 络 预测 控制 器 和 被 控 对 银 构 奸 出 的 溶液 搅拌 器 神经 网 络 预测 控制 
系统 模型 如 图 4.63 所 示 。 这 时 ， 我 们 可 以 对 设计 好 的 系统 进行 动态 可 视 化 仿真 ， 仿 真 结果 
曲线 如 图 4.69 所 示 。 
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几 4.69 信和 雇 结果 曲线 
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4.7.5 Elman 神经 网 络 在 信号 检测 中 的 应 用 


例 4.29 利用 Etman 网 络 对 信号 幅 度 进行 检测 。 
(0 问题 描述 。 
待 检测 的 信号 是 瑟 度 变化 的 正弦 信号 ， 可 以 通过 如 下 语句 生成 
pl = sin(1:20); 
P2 = sin(1:20)*2; 
p= [pl1p2 pl p2]: 
沪 信 号 由 幅度 分 别 为 ! 和 2 的 正弦 信号 交 痊 变化 构成 ， 图 4.70 中 所 绘 的 虚线 即 必 待 测 
的 正弦 信号 。 本 例 中 要 利用 Elman 网 络 对 信号 的 幅度 进行 检测 ， 希 望 网 络 能 够 正确 地 输 
出 时 变 信和 号 的 幅度 值 ， 央 此 网 络 的 目标 输出 为 
tl = ones(1.20); 
包 = ones(1.20)+23 
t=ftltttt2]; 
日 标 输出 曲线 如 图 470 中 所 绘 的 短 划 线 。 网 络 的 输入 和 目标 输 山 应 采用 串 行 序 询 格 式 ， 
了 Pseq = con2seq (p); 
Tseq = con2seq (b; 








Testing Amplimute Detcction 











网 络 仿真 输出 册 线 


目标 输出 曲线 
网 络 输入 的 测试 信号 曲线 





图 470 Elman 网 络 的 信号 幅度 检测 性 能 


(2) 进行 网 络 设计 。 
建立 由 两 层 神经 元 构成 的 Eiman 网 络 ， 网 络 的 隆 层 和 输出 层 分 别 含有 10 个 和 工 个 神 
经 元 ， 传 递 冰 数 分 别 为 tansig 函数 和 纯 线 性 函数 ， 网 络 训练 函数 为 traingdx 函数 。 
; net = newelm ([-2 2],[10 1]， (ftansig',purelin' }， traingdx); 
(3) 进行 网 络 训练 。 
设置 好 网 络 的 训练 参数 后 ， 就 可 以 对 网 络 进行 训练 了 。 


绚 
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nettrainPararn.epochs = 1000; 免 训练 次 数 
nettrainParam.show = 20; % 显示 频率 
mettrainParam.goal = 0.0]; 多 训练 目标 
metpeIformFcn = 'Sse' 狗 性 能 函数 


[nettr] = train (net Pseq, Tseqyh; 

(人 对 网 络 进行 测试 。 

利用 样本 输入 数据 对 训练 好 的 网 络 进行 测 试 : 
a=Ssim (net, Pseg); 

并 绘 出 样本 输入 、 日 标 输出 和 网 络 仿真 输出 曲线 ; 

time = 1:length(p); 
Plot (tme, p, 2 me tb time, cat(2. af:])); 
title (CTesting Amplitute Detection )， 


测试 结果 如 图 4.70 所 东 ， 图 中 的 虚线 、 短 划 线 和 实 线 分 别 表示 网 络 输入 的 测试 信号 
曲线 、 目 标 输出 则 线 和 网 络 仿真 输出 曲线 。 从 图 4.70 中 可 以 看 出 网 络 对 样本 信 苇 有 较 好 的 
检测 性 能 。 
(5) 对 网 络 推广 性 的 测试 。 
利用 一 组 新 的 输入 数据 对 训练 好 的 网 络 进行 测试 。 首 先 产生 输入 信号 和 目标 输出 : 
p3 = sin(1:20)*2.6; 免 如 果 输入 信 苇 的 幅度 为 2.6 
t= ones(1.20)*2.6; ”多 那 么 检测 输出 应 为 2.6 
、Pp4=sin(L20)*12; 名 如 果 输 入 信和 号 的 幅度 为 [2 
二 =ones(1.20)*1.2; 。 % 那么 检测 输出 应 为 1.2 
pg= fp3 ,p4 ,p3 ,p44 
tg=[G ,tt ,4 
- Pgseq = con2sedq(pg); 
然后 利用 这 一 输入 信号 对 网 络 进行 仿真 
a= sim (net, PEscq)]; 
并 绘 出 测试 信号 、 目 标 输出 和 网 络 仿真 输出 则 线 : 
和 gure; 




















time = Llength(Ppg) 
Plot (time, pg， :time,tgy, 一 ,Grme'cat(2,a{:}))， 
title (Testing Generalization' ): 
网 络 推广 性 能 测试 结果 如 图 4.71 所 示 ， 图 中 的 虚线 、 短 划 线 和 实 线 分 别 表示 网 络 输 : 
入 的 测试 信 呈 曲线、 目标 输 出 曲线 和 网 络 仿真 输 册 曲线。 从 图 4.71 中 可 以 看 出 网 络 对 这 - 
测试 信号 的 检测 性 能 虽然 不 及 样本 信号 ， 但 依然 可 以 较 成 功 地 实现 幅度 检测 。 ; 




















/ 二》 有 


Cs/ 
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Testing Generalization 







目标 输出 曲线 
网 络 仿真 输出 曲线 


网 络 输入 的 测试 信号 曲线 





锋 471 Blman 网 络 的 排 广 社 能 
《9) 给 出 本 例 的 MATLAB 程序 : 


% Exampje 4.29 

锡 产 乍 样 木 数据 P 和 目标 输出 T 

pl1=sintl: 20); 名 如 果 输 入 信号 的 幅度 为 1 
tL= ones (1, 20); 名 大 么 检测 输出 应 为 1 


p2 = sin(1:20)#2; 名 如 果 输 入 信号 的 幅度 为 2 
亿 = ones(120)#2; 多 那么 检测 输出 应 为 2 

免 将 上 述 两 组 数据 合 首 得 到 网 络 的 输入 和 目标 输出 
p= [pl p2p1p21， 

t=ftetlt2]: 


Pseq = con2seq (p); 免 将 输入 变 为 串 行 形式 
Tsgeq = con2seq (0: 忽 将 日 标 输出 变 为 串 行 形式 


全 建立 Elman 网 络 ， 网 络 由 两 层 神经 元 构成 

哆 两 层 分 别 有 !0 个 和 1 个 神经 元 ， 传 递 簿 数 分 别 为 tansig 晒 数 和 纯 线性 函数 
旬 训练 函 煞 为 traingdx 函数 

net = newelm ([-2 2, [10 1 (tansig ,purelin j，traingdx 》 

名 对 网 络 进行 训练 


nettrainParam.epochs = 1000: 狗 训练 次 数 
anet,trainParam.show = 20; 免 显示 频率 
mettrainParam.goal = 0.01; % 训练 目标 
met.performFcn = "sse' 驳 性 能 通 数 “ 


[nebdr] = train (neb Pseq, Tseq); 

名 利用 样本 数据 对 网 络 进行 仿真 

a= sim (net, Pseq); 

time = 1:length(p); 

多 第 - 幅 图 ， 旺 出 样 木 数据 的 网 络 仿真 输出 图 形 


plot (ime, p, :tme,b 一 tme， cat(2. af 
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tite (Testiag Amplitute Delection); 

免 利用 一 组 新 数据 对 网 络 进行 检测 

p3 = sin(1:20)*2.6; 锡 如 果 输 入 信 苇 的 幅度 为 26 
己 = ones(L20)*2.6; 名 那么 检测 输出 应 为 2.6 

p4 =sin(l:20)*1.2; 名 如 果 输 入 信号 的 幅度 为 1.2 
二 =ones(l.20)*1.2; 名 那么 检测 输出 应 为 1.2 

%% 产生 测试 数据 

pg = [p3 P4 p3 p4]; 

te=[Gt4G 雪 ]; 

Pgseq = con2seq(pg 六 

针 利用 测试 数据 对 网 络 进行 仿真 

4 = simknet, pgseq); 

旬 第 一 幅 图 :” 画 出 测试 数据 的 网 络 仿真 输出 
fgure; 

tme = 1:length(pg); 

plot (time, pg, ', timetg,- :time,cat(2,a{f: 
title (Testing Generalization); 

















果 
嘻 
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附录 


常用 神经 网 络 工具 箱 函 数 索引 











晃 数 名 称 页 全 贸 数 名 称 页 码 函数 名 称 页 码 
adapt @2 iearngd 86 pnormc 152 
boxdist 127 learngdm 87 posiin 109 
calca 145 learmh 87 postmnmx 130 
calcat 145 leamhd 88 postreg 13! 
calce 145 learnis 89 poststd 132 
calce1 145 learmk 90 . prern mx 129 
CalcgX 146 learnjv1 91 Prepca 133 
calcjeij 146 learlv2 22 prestd 131 
caicjx 146 learmmos 93 purelin 110 
calcpd 146 learnp 94 quant 152 
calcperf 147 learmpn 中 Tadbas 110 
cell2mat 148 leamsom 95 Tandmnc 69 
Sornbyec 148 ltearnwh 97 Tandnr 30 
compet 107 jinkdist 128 Tands 加 
con2seq 149 logsig 109 randtop 127 
concur 149 mae 98 Tevett 63 
ddotprod 122 manmdist 119.129 Satlin 1 
ahardlim 114 Inal2cell 150 satlins 111 
dhardlims 114 maxjinlr 137 Seq2con 152 
disp 62 midpoint 的 SPtx 147 
display 62 mintnax 151 sim 妈 
dist 118.128 JSe 99 Softmax 112 
dlogsig 115 Imsereg 99 srchbac 104 
dmae 101 megdist 120 Srchbye 105 
dmse 102 metprod 123 srchcha 105 
dmsereg 102 netsum 123 Srchgol 106 
dnetprod 124 netwaork 46 srchhyb 106 
dnetsurmm 125 DewWc 48 SS 100 
dotprod 119 newcf 49 sumsqr 153 
dposlin 115 Dewelrm 50 tansig 112 
dpurelin 1145 new 箱 51 train 63 
dradbas 116 mewfftd S2 trainb 31 
dsatlim 116 Dewgtnn 53 trainbfg 716 
dsatlins 117 newhop 54 trainbr 74 
dsse 103 Dewlin 5 trainc 72 
dtansig 117 newlind 56 traincgb 77 
dtribas 17 Dewlvdq 56 traincg 太 73 
cmsuf 135 newp 57 traincgp 78 
formx 147 newpnn 58 train2d 719 
etx 147 Dewrb 59 traingda 80 
8ridtop 126 newrbe 60 traingdm 81 
hardlim 108 Dewsorm 61 traingdx S1 
hardlims 108 mofmec 151 trainlm 82 
hextop 126 normprod 121 tmainoss 83 
bintonw 137 Dorm 151 trainr 73 
hintonwtb 138 plothr 138 traiprp 83 
ind2vec 150 plotep 140 trains 了 4 
init 63 plotes 139 trainscg 78 
initeon 68 plotpe 140 trammnrmx 133 
initlay 66 plotpy 140 trapca 135 
jnitnw 67 piotperf 141 trastd 134 
initwb 67 Plotsom 142 tribas 113 
initzero 6& pletv 143 Yec2ind 153 
earmncon 8 Piotvec 143 














从 
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